Apple Vision Proで音程を空間で可視化し音感改善するまで by 服部 智

iOSDC Japan 2025
LT(5分)

Apple Vision Proで音程を空間で可視化し音感改善するまで

shmdevelop 服部 智 shmdevelop
4

Apple Vision Proを活用し、自分の発した声や楽器の音程を空間上に可視化する機能を実装しました。

単に周波数を表示するのではなく、「今の音が目的の音程に対して高いか・低いか」を3D空間に直感的に表示し、自分の音感をリアルタイムで補正できる仕組みを構築。
実際にこのアプリを使って練習を継続した結果、ピッチのズレ補正が体感でき、音感トレーニングとしての実用性が期待できそうです。

本セッションでは、空間UIによる音程フィードバック設計、Vision Pro上での周波数検出と3Dビジュアライズ手法、日々の改善プロセスまで、実装から習熟までの過程を具体的に解説します。

空間コンピューティングの新しい応用例や、感覚の可視化×習得支援に興味のある方にとって、技術面・UX面の学びを持ち帰っていただける内容です。