Четыре ИИ-агента на Gemini 4 Argon сами распределили роли, 605 раз погибли и всё-таки убили Эндер-дракона.
Исследователи Google опубликовали статью о том, как четыре агента на базе Gemini 4 Argon полностью прошли Minecraft и убили финального босса, Эндер-дракона. Человек в процесс не вмешивался. Об эксперименте пишет Shazoo.
Главное здесь даже не сам Minecraft. DeepMind когда-то прославилась AlphaGo: в 2017 году эта система обыграла сильнейшего игрока в го Кэ Цзе. Но AlphaGo создавали под одну конкретную игру. Теперь с задачей сложнее справилась универсальная агентная модель, которую никто специально под Minecraft не затачивал.
Условия были жёсткие. Агентов выпустили в изолированный мир в режиме выживания со случайной картой и дали одну цель — убить Дракона Края. Ни ролей, ни стратегии, ни особых инструментов. Персонажами агенты управляли через Mineflayer, открытую библиотеку для программного контроля игрока. Клавиши они не нажимали: писали код и запускали его. Договаривались через внутриигровой чат и общую память.
Источник: Shazoo
Роли агенты распределили сами, и довольно быстро. Они предупреждали друг друга об угрозах, делились выводами из неудач, передавали координаты и собирали вещи павших союзников. В итоге специализация сложилась такая:
janesick — крафт инструментов;
gyldenia — еда и припасы;
auratian — активация портала в Край;
bulicame — укрытия от эндерменов и последний удар по дракону.
Гладким прохождение не назовёшь. На всё ушло 27,23 часа, и львиную долю времени съел бой с драконом. За это время агенты написали и выполнили 2783 программы, отправили друг другу 229 сообщений и погибли 605 раз.
Честность проверял пятый агент — the Observer («Наблюдатель»). Он следил, чтобы участники не жульничали, выкладывал отчёты в реальном времени и в конце составил итоговую сводку.
Источник: Shazoo
Бесплатным эксперимент тоже не был. Агенты потратили 1,35 млрд входных токенов. По ценникам Gemini это $810, по стандартному тарифу — $1620.
ИИ в Minecraft уже добивался заметных результатов, но в куда более узких задачах. В 2023 году Nvidia показала агента Voyager на GPT-4, который тоже работал через Mineflayer и осваивал игру. DreamerV3 от DeepMind научилась добывать алмазы, не видя примеров игры людей. До победы над финальным боссом ни одна из этих работ не доходила — у Gemini 4 Argon это первое полное прохождение такого рода.