情報処理学会 第77回全国大会講演要旨

本稿では，ダンス共演ロボットのためのマルチモーダルビートトラッキング手法について述べる．ダンス共演ロボットは，音楽と人間の動作を認識しながら人間と共に踊るエンターテインメントロボットである．この種のロボットでは，音楽のテンポとビート時刻をリアルタイムに推定することが重要であるが，音響信号のみを用いた従来法では，音楽のテンポの揺らぎや裏拍ビートを含む多様なリズムの追従に失敗する問題があった．本研究では，この問題を解決するため，音響信号に加えてダンサーの骨格時系列情報を同時に考慮しながらビートトラッキングを行う手法を提案する．実際のセンサデータを用いた実験により，提案法の有効性を確認した．