情報処理学会 第83回全国大会 会期:2021年3月18日~20日 会場:オンライン開催 情報処理学会 第83回全国大会 会期:2021年3月18日~20日 会場:オンライン開催

5W-03
マスク越しフレーズ認識に向けたミリ波レーダによる口の形状変化の検出手法
○山川凌太郎,飯塚達哉,石毛真修,笹谷拓也,高木 健,川原圭博(東大)
新型コロナウイルスの感染拡大の影響によりマスクの着用が普及しているが,音声の減衰や口の視覚情報の遮断により,発話内容が伝わりにくくなる.そこで本論文では,マスクを透過するミリ波レーダを用いて口の動きを読み取り,機械学習を用いて発話内容を推定する手法を提案する.口の動きによるミリ波レーダの受信信号の変化をレンジドップラー画像として識別し,それを特徴量として機械学習に入力することでフレーズの分類を行う.また本手法は口を動かすだけでフレーズ認識を実現できるため,声が出せない環境下でもコミュニケーションを支援することが期待される.