Matrix-Game 2.

0: Открытый генератор интерактивных 3D-миров от Skywork
Друзья, рады поделиться с вами новостью из мира нейросетей и видеоигр. Компания Skywork представила Matrix-Game 2.0 первую открытую модель, которая генерирует интерактивные 3D-миры из текста в реальном времени. Это мощный инструмент для разработчиков, исследователей и всех, кто интересуется созданием виртуальных миров.
Matrix-Game 2.0 позволяет создавать видео с частотой 25 кадров в секунду, генерировать минуты непрерывного геймплея и предоставляет полную интерактивность, включая движение, повороты и исследование мира. Среди встроенных шаблонов можно выбрать такие миры, как город, дикая природа, TempleRun, GTA и другие.
Это решение идеально подходит для создания игровых движков, тренировки AI-агентов и разработки виртуальных персонажей. Модель обучена на 1350 часах видео геймлея, что позволяет движку точно реагировать на нажатия клавиш и движение мыши на каждом кадре. Важная особенность KV-Cache, который хранит контекст, обеспечивая непрерывную генерацию мира без ограничений по времени.
Чтобы использовать Matrix-Game 2.0, вам потребуется GPU с памятью не менее 24 ГБ (A100 и H100 протестированы). Если вы хотите попробовать сами, переходите на Hugging Face или воспользуйтесь репозиторием, чтобы начать работу.
Ссылки:
Hugging Face: https://huggingface.co/Skywork/Matrix-Game-2.0 Репозиторий: https://matrix-game-v2.github.io #ITновости #ITтренды