DeepMindのUNREALの自然言語理解
ランニングできず 英語30分
(1) DeepMind UNREALでの自然言語理解の論文を読む
Grounded Language Learning in a Simulated 3D World | DeepMind
これは迷路ゲームの中に報酬が複数ある。
a)報酬の取り方の順序を自然言語で与える。
b)実際にその順番で報酬を取る操作を行う。
上記を様々な表現で多数回行うと、除々に自然言語を理解し始め、自然言語を与えるだけでその指示に従うことができる。
下の図は「赤の物体を取り緑の物体を取れ」と指示すると実際に動作した画面である
下図は自然言語理解のモデル図で中央のMが実際の動作と自然言語を結び付けて学習する。