情報処理学会 第84回全国大会 会期:2022年3月3日~5日 情報処理学会 第84回全国大会 会期:2022年3月3日~5日

7C-01
姿勢・手指形推定を単純に活用した手話表現の検索
○田中省作(立命館大),本田久平(大分高専),バイティガ ザカリ(沖縄高専)
文字で語を表現できる言語の場合,その文字を使って辞書をひいたり,用例を検索することができる.一方,視覚言語である手話の場合,手指や腕の動きによる表現を,手話-日本語のような辞書や手話の映像のなかから探す効率的な方法がほとんどなく,人の目で探していくようなことになる.そこで,本研究では人の姿勢・手指形の自動推定プログラム(OpenPose,MediaPipe)を活用し,カメラや映像中の手指や腕の動きを認識する.それらの情報から腕や手指やそのその動作をベクトル化し,手指や腕の動きによる手話映像の検索を実現する.きわめて単純な方法だが有用である.