音声からリアルタイムで3Dコンテンツを生成する技術と visionOS への応用 by akkey

Apple Vision Pro の登場により、3Dコンテンツの活用領域が大きく広がりました。
また、 Apple も近年 AI 分野に力を入れていると言われており、3Dコンテンツに対して AI をどのように活用するかが非常に重要です。
このトークでは、 音声から3Dコンテンツをリアルタイムで生成する技術と、それを visionOS 上で描画・操作する技術についてご紹介します。

• 音声から3Dコンテンツをリアルタイムに生成
  • 応答に時間がかかるという特性の対処方法
  • 大きくなりがちな通信容量問題の対処方法
• visionOS 上での描画と操作
  • USDZ ファイルを RealityKit Framework を使って描画する方法
  • 3次元操作を複数ジェスチャーに対応する方法

visionOS 向けのアプリ開発に興味がある方はもちろん、3Dコンテンツ生成に AI を活用するノウハウを学びたい方にとっても貴重なトークとなることでしょう。