CJ-005
対象物のイメージに基づく図像的ジェスチャの形状推定

◎二瓶芙巳雄・中野有紀子（成蹊大）・東中竜一郎・石井　亮（NTT）

図像的ジェスチャは物理的な対象物を表現するために使用され，また対象物についてのジェスチャ形態は話者のイメージに基づくと仮定される．以上の考えに基づき本研究では，対象物の写真から作成された視覚的情報から図像的ジェスチャの形態を推定するニューラルネットワークモデルを提案する．モデル評価実験では，2段階のジェスチャ形態選択手法により，7種類のジェスチャ形態を62%以上の性能で分類することができた．さらに，対象物にジェスチャ形態を割り当てるジェスチャ辞書を作成し，ジェスチャ辞書を使用したバーチャルエージェントシステムによるジェスチャ生成例を示した．