AudioMove
空間オーディオを応用した多方向肢体運動ガイダンス
Applying the Spatial Audio to Multi-Directional Limb Exercise Guidance
2024
夏成碩*,閔天*,杉浦裕太(*共同筆頭著者)
Chengshuo Xia*, Tian Min* and Yuta Sugiura (* these authors contributed equally)

[引用はこちら/Reference]
Chengshuo Xia*, Tian Min*, and Yuta Sugiura (*these authors contributed equally). 2024. AudioMove: Applying the Spatial Audio to Multi-Directional Limb Exercise Guidance. Proc. ACM Hum.-Comput. Interact. 8, MHCI, Article 244 (September 2024), 26 pages. [DOI]

ユーザの手足の運動をナビゲーションすることは、筋肉トレーニングや身体の回復をサポートする。一方で、従来のカメラベースの方法では、ユーザが動きを計測するために複数のカメラを設置する必要であり、ユーザは画面の範囲内にいる必要がある。したがって、我々は視覚を使わないシステムを提案する。本システムは、商用のデバイス(スマートフォンやイヤホン)を使用して、空間オーディオを利用してユーザーに多方向の手足の動きをガイドするものである。我々は、モーションデータと空間オーディオの認識を組み合わせた3つの方法でシステムの効果を評価するために、ユーザスタディを実施した。結果として、空間オーディオによるナビゲーションは、日常生活において自然で普及しやすい非視覚的な運動トレーニングソリューションを提供できることが示唆された。

Guiding users with limb exercise can assist in muscle training or physical recovery. However, traditional vision-based methods often require multiple camera angles to help users understand the motions and require them to be within the range of the screen. Therefore, we propose a non-visual system that can guide users with multiple-directional limb motions utilizing spatial audio, AudioMove, with the commercial-off-the-shelf (COTS) devices (i.e., smartphones and earphones). The proposed system addresses the challenge of conveying directional information encompassing multiple planes in real-time. We conduct a mixed-method user study to evaluate the effectiveness of the system with three methods combining motion data with spatial audio perception. Additionally, a user interface is built for collecting users' comments. The results conclude that spatial audio guidance could create a natural, pervasive, and non-visual exercise training solution in daily life.