2T-01
画像と文章知識の融合による英語テスト自動解答手法の研究
○盛　　陽（電通大）
近年,ビッグデータの充実および計算処理の高速化により,画像認識や自然言語処理のタスクにおいて,単一の深層学習が短時間で実行できるようになってきた.今後,各分野のタスクの性能向上により, 次は, マルチメディアを融合する高度な知識処理の実現が必要とされる.
本研究では,この観点からセンター試験のイラスト問題をパソコンに解かせることを初めて試みた.この手法では,構文解析器で名詞を抽出し,その名詞のクラスタリングにより問題文が何を聞いているかを判定する.その後,Webより検索した画像に基づき,CNNを使い選択肢の分類を行う.この手法により,解答中での問題を特定し,更に提案手法の有効性を示した.
footer 著作権について 倫理綱領 プライバシーポリシー セキュリティ 情報処理学会