Рассуждения и целенаправленные действия даже в незнакомых играх: Google представила игрового ИИ-компаньона SIMA 2 на базе Gemini

Команда Google DeepMind представила новую версию ИИ-агента SIMA (Scalable Instructable Multiworld Agent), изначально представленного в марте 2024 года. Новый SIMA 2 впервые использует искусственный интеллект Gemini. 

Как отмечают в компании теперь агент может выйти за рамки простого следования инструкциям, «понимая общую цель пользователя, выполняя сложные рассуждения и умело выполняя целенаправленные действия в играх». Причём он способен справиться  даже с теми играми, которые ранее не встречал. 

Агент может описывать шаги, предпринимаемые для достижения целей, отвечать на вопросы пользователя и оценивать своё поведение и окружающую среду. SIMA 2 понимает задания из многих шагов и мультимодальные подсказки, такие как наброски, многоязычный текст и даже эмодзи. Также агент может переносить изученные концепции, например, применять знания о «добыче ресурсов» из одной игры к «сбору урожая» в другой.

В настоящее время SIMA 2 доступен ряду исследователей и разработчиков игр в качестве ограниченной ознакомительной версии.