DeepMindのUNREALの自然言語理解

ランニングできず　英語30分

(1) DeepMind UNREALでの自然言語理解の論文を読む

Grounded Language Learning in a Simulated 3D World | DeepMind

これは迷路ゲームの中に報酬が複数ある。

   a)報酬の取り方の順序を自然言語で与える。

   b)実際にその順番で報酬を取る操作を行う。

上記を様々な表現で多数回行うと、除々に自然言語を理解し始め、自然言語を与えるだけでその指示に従うことができる。

下の図は「赤の物体を取り緑の物体を取れ」と指示すると実際に動作した画面である

下図は自然言語理解のモデル図で中央のMが実際の動作と自然言語を結び付けて学習する。