Четыре агента с искусственным интеллектом координируют свои действия, чтобы завершить Minecraft без вмешательства человека

Команда из четырех агентов искусственного интеллекта, разработанная Google DeepMind, совершила беспрецедентный подвиг: она прошла одну из самых популярных в мире видеоигр без участия человека.
Для этого ИИ потребовалось более 27 часов непрерывной работы, в течение которых они написали тысячи программ, учились на своих ошибках и автономно координировали свои действия.
В эксперименте, описанном в исследовании, опубликованном в научном репозитории arXiv исследователями Максенсом Фалдором, Сатиндером Сингхом и Робертой Райляну, использовались агенты, основанные на модели аргона Gemini 4.
Его целью было победить Эндер-дракона, могущественного дракона, представляющего собой финальное испытание в Minecraft — виртуальной вселенной, состоящей из трехмерных блоков, где игроки должны исследовать, собирать ресурсы, создавать инструменты и выживать в условиях многочисленных угроз.
Удивительно, что искусственный интеллект не был специально обучен играть в эту игру. Вместо этого он использовал свои общие знания и навыки программирования, чтобы самостоятельно выяснить, как преодолеть многочисленные препятствия, отделявшие его от отправной точки и финальной битвы.
Задача, которую им пришлось решать с нуля.
Исследователи поместили четырех агентов в один и тот же случайно сгенерированный мир Minecraft, установив легкий уровень сложности и отключив чит-команды. Единственная инструкция, связанная с игрой, гласила: «Победите Эндер-дракона», без каких-либо заранее разработанных стратегий или подробных указаний о шагах, необходимых для достижения этой цели.
В отличие от игроков-людей, которые использовали клавиатуру и мышь, ИИ управлял своими персонажами с помощью программ, написанных на JavaScript, и инструмента под названием Mineflayer.
Эта система позволяла им получать текстовую информацию о своем местоположении, здоровье и инвентаре, а также выполнять такие действия, как ходьба, копание, создание предметов и сражения с врагами.

Для координации действий агенты обменивались сообщениями через чат видеоигры, где делились открытиями и организовывали свою деятельность. Пятая система искусственного интеллекта выступала в роли наблюдателя, проверяя происходящее, в то время как ученые контролировали эксперимент, не вмешиваясь в принимаемые решения.
Более 600 смертей до достижения победы
После 27 часов и 14 минут активной работы четырем агентам удалось победить дракона и выполнить главную задачу Minecraft. За это время они написали 2783 компьютерные программы и понесли не менее 605 внутриигровых потерь — неудачи, которые позволили им пересмотреть стратегии, исправить ошибки и разработать новые решения.

Одним из самых удивительных аспектов стала их способность к самоорганизации без предварительного распределения обязанностей между участниками.
Агенты самостоятельно определяли, как распределить задачи по исследованию, сбору ресурсов, изготовлению инструментов и ведению боевых действий, адаптируясь к потребностям, возникающим во время приключения.

«Никто не назначал роли и не писал игровую логику», — подчеркнули исследователи, которые считают этот результат важной демонстрацией автономного сотрудничества между системами искусственного интеллекта.
Прорыв, выходящий далеко за рамки видеоигр.
Хотя эксперимент проводился в виртуальной среде, его результаты могут иметь значение для множества технологических областей.
По-настоящему важно не то, что ИИ победил цифрового дракона, а то, что он продемонстрировал свою способность сохранять концентрацию на цели более суток, решать последовательные задачи и координировать действия без прямого участия человека.

Эти навыки могут оказаться ценными при разработке систем, способных выполнять сложные проекты программирования, проводить технические исследования и другие виды деятельности, требующие длительного планирования и адаптации к непредвиденным обстоятельствам.
Однако сами исследователи признают существенное ограничение: эксперимент проводился только один раз, поэтому пока невозможно определить, как часто можно будет воспроизвести полученный результат.
Несмотря на это замечание, достижение представляет собой значительный шаг на пути к развитию все более автономных систем искусственного интеллекта, способных к сотрудничеству и преодолению длительных трудностей без участия человека на каждом этапе.