研究目的

工場など産業の現場だけでなく日常生活も支援してくれるAIの実現は人類の大きな夢ですが、まだなかなかうまくいっていません。日常生活空間では人や物、その間の相互作用や状態の変化など、非常に個別性の高いさまざまな要素が多重層的に組み合わさってしまいます。例えば、家庭用汎用ロボットであれば以下のような知識の処理が求められるでしょう。

• １）住人の身体的特徴や室内環境に関する知識
• ２）住人の行動や意図・目的に関する知識
• ３）怪我をさせないための人体に関する一般的な知識、事故事例との関連、安全ガイドライン
• ４）提供する支援サービスに関する知識
• ５）一般的な常識知識

人間であれば自然に組み合わせて理解・活用できる知識をAIシステムも利用できるようにするために、長期間（複数時空間）に渡る動画像や自然言語など、質・量・モダリティが異なる情報を結びつけて、AIシステムの推論・認識プロセスに組み込むための研究が必要になります。データ駆動型AIと知識駆動型AIを統合し、人間活動の背景や意味を理解するAI技術の開発を目指しています。

具体的な研究内容

上記の研究目的を実現するために、主に知識グラフ、大規模言語モデルの利活用、XAI、対話システム、情報検索、情報抽出に関する研究を実施しています。
また、Unityシミュレータ（VirtualHome2KG）を用いてアバターに日常生活行動を取らせた動画と、その動画内で起きているアバターと環境の相互作用が、連続する時空間系列で変化する様子を記述した知識グラフの対をデータセットして公開し、生活リスクを推論するAIシステムの性能を競うコンテスト「ナレッジグラフ推論チャレンジ【実社会版】」を開催しています。また、そのようなAIシステムに関する研究を実施しています。