6ZG-3
コンピュータ画面と顔画像を組み合わせた操作履歴の検索
○杉浦遼一,梅村恭司,岡部正幸(豊橋技科大)
コンピュータを使う演習において過去の操作の状況を取得したい問題がある.
先行研究では,コンピュータの画面画像を用いた検索を行うシステムを構築した.
そのシステムでは過去の情報として画面画像を利用した検索が提案されている.
しかしながら,画面画像だけでは同じような操作をしていた場合,
理解して操作を行っているのか,困っていて操作を行っているのか,
判断が出来ない問題がある.
本研究では,画面画像のほかに顔画像を用いることで検索対象がどのような表情で
その操作を行っていたかを判断出来るシステムを試作した.一致する顔画像は
検索結果の画面画像の直前の顔画像を参照する事で,検索結果に画面画像のほかに
顔画像を提示した.