情報処理学会 第81回全国大会講演要旨

本稿では、音と画像を用いたStructure from Motion (SfM)に基づく、動的環境下における三次元復元アルゴリズムを提案する。SfMは通常、動的物体の存在しない定常環境を仮定するため、動的物体は三次元復元をすることができない。動的物体は、その動きや振動から音を発することが多い。本稿ではこの問題を解決するため、音源定位により得られる音情報を利用した、Audio-Visual SfMを提案する。評価実験において提案手法が、動的物体が存在する領域を適切に復元していることを示す。