Google показала ИИ-агента, который учится играть в игры, как человек

SIMA обладает способностью понимать происходящее в 3D-мирах и распознавать изображения, а также умеет выполнять инструкции на естественном языке. Он обучен не побеждать, а проходить игры и делать то, что ему говорят. В перспективе он сможет овладеть любой, даже нелинейной видеоигрой с открытым миром.

DeepMind сотрудничает с 8 игровыми разработчиками, включая Hello Games, Embracer, Tuxedo Labs, Coffee Stain и другими — они помогают тренировать и тестировать SIMA. Свои навыки он оттачивает на таких играх, как No Man’s Sky, Teardown, Valheim и Goat Simulator 3. Кастомные API для запуска игр или доступ к исходному коду ему для этого не нужны.

Разработчики выбирали игры, которые больше ориентированы на открытый мир, чем на повествование, чтобы SIMA развивал общие игровые навыки. К примеру, в игре Goat Simulator больше требуется совершать случайные, спонтанные действия — именно такой спонтанности хотели добиться от SIMA в DeepMind.

Для этого разработчики создали игровую среду при помощи Unity, где агентам нужно было создавать скульптуры, чтобы показать понимание манипулирования объектами. Далее они записали совместные действия пар живых игроков, один из которых давал инструкции, а другой — выполнял. Затем игроки играли по отдельности, чтобы продемонстрировать результат своих действий в игре. На основе этих данных SIMA обучался предсказывать дальнейший ход игры.

Сейчас в арсенале ИИ-агента около 600 базовых навыков, таких как движение вперёд-назад, поворот, взаимодействие с объектами и действия с меню, например открытие карты. Разработчики хотят обучить его более сложным задачам в игре — например, «найти ресурсы и построить лагерь» он пока не может. Благодаря этому SIMA станет полноценным участником игр, который сможет влиять на результат и приводить к победе.