採択 2021/09/19 16:35〜 Track A LT(5分)

NDIとARKitを連動させた新しい映像表現 iOSDC Japan 2021

shmdevelop 服部 智 shmdevelop

Network Device Interface(NDI)はIP ネットワークを経由し映像を伝送する方式の1つです。
現在世界で最も利用されているIP伝送テクノロジーで、高画質な映像を無線で送受信できます。

iOSからでもSDKを通じて使用可能です。
(SwiftからNDIを使うのは少し大変でした!)

シンプルに映像送信するところから始め、
フレーム単位でメタデータを付加できることを利用しARの新たな映像表現に活用してみました。

送信アプリ実装、受信側設定、作った表現と工夫点など。

デモ、ソース解説を中心に、ARと映像の新しい形態を解説します。