俺たちのARKitでめちゃめちゃ表情豊かなVTuber向け表情トラッカーを作るぞ by hiragram

iOSDC Japan 2019
採択
2019/09/07 15:45〜
Track A
LT(5分)

俺たちのARKitでめちゃめちゃ表情豊かなVTuber向け表情トラッカーを作るぞ

hiragram hiragram hiragram

Animojiにも使われているTrueDepthカメラを使って3Dモデルの表情を動かす表情トラッカーを作りました。webカメラを用いて顔認識する他のシステムよりも精度高く、細かく、感情表現に必要な顔のパラメータを取得できるTrueDepthカメラの本気をお見せします。

表情トラッキングの精度以外にも、ARKitのおかげでバーチャルYouTuberを運用するにあたって地味に嬉しい機能をたくさん獲得しているので、プロデュースの現場の目線から面白おかしく紹介できればと思います。