Web会議システム等を利用した遠隔地間における映像通話は日常的なものとなった．一方，物理的なテーブルを囲んで対話をしつつ，状況に応じて物理的なホワイトボードを利用して意思疎通を図るといった自然なコミュニケーションを，既存のWeb会議システムで実現することは困難である．そこで筆者らは，ARグラスと360度撮影可能なビデオカメラを組み合わせ，互いの相対的な位置関係と周囲環境を容易に把握できる機能を実現し，自然なコミュニケーションを支援するための全方位遠隔対話システムの研究を進めている．本稿では，提案システムの概要を述べ，対話相手と周辺環境を効果的にARグラス上で表示するための機能について提案する．