NDIとARKitを連動させた新しい映像表現 by 服部 智

iOSDC Japan 2021
採択
2021/09/19 16:35〜
Track A
LT(5分)

NDIとARKitを連動させた新しい映像表現

shmdevelop 服部 智 shmdevelop

Network Device Interface(NDI)はIP ネットワークを経由し映像を伝送する方式の1つです。
現在世界で最も利用されているIP伝送テクノロジーで、高画質な映像を無線で送受信できます。

iOSからでもSDKを通じて使用可能です。
(SwiftからNDIを使うのは少し大変でした!)

シンプルに映像送信するところから始め、
フレーム単位でメタデータを付加できることを利用しARの新たな映像表現に活用してみました。

送信アプリ実装、受信側設定、作った表現と工夫点など。

デモ、ソース解説を中心に、ARと映像の新しい形態を解説します。