ИИ-агент от Google DeepMind находит алмазы в популярной игре Minecraft без обучения. Система Dreamer, разработанная в рамках проекта DeepMind, достигла важной вехи развития ИИ: она может
воображать последствия своих возможных решений. Благодаря этому впервые в истории система ИИ научилась собирать алмазы в видеоигре Minecraft — сложной задаче, требующей выполнения нескольких последовательных шагов — без необходимости демонстрировать ей, как играть.
Создатели Dreamer утверждают, что это важный шаг на пути к созданию машин, способных обобщать знания, полученные в одной области, и применять их в новых ситуациях, что является главной целью ИИ.
В Minecraft игроки исследуют виртуальный трёхмерный мир, наполненный разнообразными ландшафтами, включая леса, горы, пустыни и болота. Они используют ресурсы мира для создания предметов, таких как сундуки, заборы и мечи, а также для сбора ценных ресурсов, среди которых самыми редкими являются алмазы.
Важно отметить, что в Minecraft нет двух одинаковых игр. «Каждый раз, когда вы играете в Minecraft, это новый, случайно сгенерированный мир», — говорит Даниджар Хафнер, учёный из Google DeepMind. Это делает игру особенно полезной для тестирования ИИ-систем, которые должны уметь обобщать свои знания из одной ситуации в другую. «Вы должны действительно понимать, что перед вами; вы не можете просто запомнить конкретную стратегию», — подчеркивает он.
Исследователи ИИ сосредоточились на поиске алмазов, поскольку это требует выполнения ряда сложных действий, включая поиск деревьев и их рубку для получения древесины, которую игроки могут использовать для создания верстака.
По словам Хафнера, ключ к успеху Dreamer заключается в том, что он создаёт модель окружающей среды и использует эту «модель мира» для «представления» будущих сценариев и принятия решений. Подобно нашим собственным абстрактным мыслям, модель мира не является точной копией окружающей среды. Однако она позволяет ИИ-агенту Dreamer пробовать новые действия и прогнозировать потенциальную выгоду от различных стратегий, используя меньше вычислений, чем потребовалось бы для выполнения этих действий в Minecraft. «Модель мира действительно наделяет систему ИИ способностью представлять будущее», — говорит Хафнер.
Эта способность также может помочь в создании роботов, которые смогут учиться взаимодействовать в реальном мире, где стоимость проб и ошибок гораздо выше, чем в видеоигре, подчеркивает Хафнер.