Компания Microsoft представила Muse — инновационную генеративную модель, способную создавать видеоигры. Эта технология была разработана в сотрудничестве со студией Ninja Theory и может генерировать игровые миры, реагируя на действия пользователей. Muse обучилась на основе экшена Bleeding Edge, выпущенного в 2020 году, на данных более чем одного миллиарда игровых сессий.
В видео, доступном на YouTube-канале Microsoft Copilot, компания объяснила, что Muse не является заменой для игровых разработчиков, а напротив, должна стать полезным инструментом для них. Она поможет тестировать механики, добавлять новый контент в уже существующие проекты и, в конечном итоге, ускорить процесс разработки игр.
На текущий момент Muse может создавать игровые миры по низкокачественным описаниям с частотой 10 кадров в секунду и разрешением 300×180 пикселей. Несмотря на это, в Microsoft уверены, что модель будет дорабатываться и в конечном счете станет мощным инструментом для разработчиков видеоигр. Недавно в журнале Nature была опубликована статья о Muse в рамках модели мира и действий человека (WHAM).
Согласно представителям Microsoft, Muse уникальна в своем роде и обладает способностью создавать как визуальные эффекты, так и действия контроллера, учитывая трехмерное окружение и физику, а также поведение игроков. Обучение этой нейросети велось на протяжении семи лет, используя данные от пользовательских сессий в онлайн-игре Bleeding Edge. Хотя проект находится только на начальной стадии, представители компании уверены, что Muse будет полезна для современного гейминга, улучшая классические игры и адаптируя их под новые платформы.