🤖 ИИ-модель Genie 2 научилась генерировать бесконечные 3D-миры

Компания Google DeepMind представила новую версию модели искусственного интеллекта Genie — Genie 2. В отличие от своей предшественницы Genie, специализирующейся на генерации 2D-графики (от анимированных 2D-изображений до 2D-платформеров), вторая версия может создавать симуляции виртуальных миров в трёхмерном пространстве.

В них можно совершать базовые действия — к примеру, бегать, прыгать и плавать, используя мышь или клавиатуру. Симуляции также могут визуализировать простые взаимодействия с объектами, освещение, физику, отражения и примитивные действия NPC.

Выше можно увидеть примеры миров, созданных людьми с помощью Genie 2. В каждом из них в качестве вводных данных, помимо промпта, модель получала одно изображение, сгенерированное нейросетью Imagen 3. Иными словами, любой может описать желаемый мир с помощью текста, выбрать понравившуюся визуализацию своей идеи, а затем погрузиться в новый мир и взаимодействовать с ним (или дать возможность системе анализировать его и автономно обучаться с помощью ИИ-агента).

На каждом этапе человек или ИИ-агент выполняет действия с помощью клавиатуры и мыши, а Genie 2 продолжает симуляцию созданного мира с разных ракурсов. При этом модель может запоминать окружение, которое теряется из виду, а затем точно воспроизводить его, когда оно снова появляется в поле зрения.

Genie 2 способна генерировать мир одной и той же вселенной в течение минуты, при этом продолжительность представленных примеров составляет примерно 10–20 секунд. По этой причине создать полноценную игру невозможно. Впрочем, и сами создатели позиционируют Genie 2 больше как инструмент для исследований и творчества, который поможет создавать прототипы «интерактивного опыта» и совершенствовать ИИ-агентов, подобных SIMA.