ヘッドジェスチャを検知して Vibe Cooking by Kanta Oikawa

Vibe Cooking は、"ノリで料理する" がコンセプトのアプリです。このアプリでは、レシピ手順の読み上げや音声操作によるレシピ手順の移動で、調理中のハンズフリー操作を実現していました。

2024 年 9 月、Apple は、頷きまたは首振りのヘッドジェスチャを使用して Siri に応答する機能を発表しました。これは、新しいインタラクションの形であり、"ノリで料理する" がコンセプトである以上、ヘッドジェスチャによるインタラクションを実装しなければならないという使命感に駆られました。

このトークでは、AirPods を使ったヘッドジェスチャ検知の実装方法と、それが音声によるインタラクションとどのように異なるのか、Vibe Cooking の UX にどのような影響を与えたのかについてお話しします。

このトークでお話しすること

• CoreMotion を使った ヘッドジェスチャ検知の実装: 頷きや首振りのヘッドジェスチャをどのように検知し、アプリに組み込んだのかを解説します。
• ヘッドジェスチャによる UX の変化: ヘッドジェスチャが Vibe Cooking の UX にどのような影響を与えたのか、音声操作と比較しながら紹介します。