Игры на базе искусственного интеллекта от Etched без графических процессоров: демонстрация копии Minecraft

1 ноября 2024, 15:34 / Технологии → Новости / Технологии

Игровая индустрия вот-вот подвергнется масштабным изменениям. Вместо использования игровых движков для питания игр мы сейчас наблюдаем совершенно новую и безумную концепцию. Стартап, специализирующийся на разработке ASIC специально для архитектуры Transformer, основы генеративных моделей ИИ

Thumbnail: Искусственный интеллект Иску́сственный интелле́кт (ИИ; англ. artificial intelligence, AI) — свойство искусственных интеллектуальных систем выполнять творческие функции, которые традиционно считаются прерогативой человека (не следует путать с искусственным сознанием); наука и технология создания интеллектуальных машин, особенно интеллектуальных компьютерных программ. Искусственный интеллект связан со сходной задачей использования компьютеров для понимания человеческого интеллекта, но не обязательно ограничивается биологически правдоподобными методами. Существующие на сегодня интеллектуальные системы имеют довольно узкие области применения. Википедия

, таких как GPT/Claude/Stable Diffusion, продемонстрировал в партнерстве с Decart демоверсию клона Minecraft

Minecraft (от англ. mine «шахта», «добывать» и англ. craft «ремесло») — компьютерная инди-игра в жанре песочницы с элементами симулятора выживания и открытым миром, разработанная шведским программистом Маркусом Перссоном, известным также как «Notch», и позже выпускаемая основанной Перссоном компанией Mojang. Портированием и поддержкой версий игры для игровых консолей занималась британская компания 4J Studios. Википедия

, полностью сгенерированного и управляемого ИИ вместо традиционного игрового движка. В то время

Thumbnail: Время Время — форма протекания физических и психических процессов, условие возможности изменения. Одно из основных понятий философии и физики, мера длительности существования всех объектов, характеристика последовательной смены их состояний в процессах изменения и развития, а также одна из координат единого пространства-времени, представления о котором развиваются в теории относительности. В философии — это необратимое течение (протекающее лишь в одном направлении — из прошлого, через настоящее в будущее). В метрологии — физическая величина, одна из семи основных величин Международной системы величин (англ. Википедия

как мы используем ИИ для создания изображений и видео на основе определенных описаний и вывода довольно реалистичного контента, создание целой играбельной игры с помощью модели ИИ — это нечто иное. Oasis — первая играбельная, в реальном времени, в реальном времени, модель ИИ с открытым миром, которая принимает ввод пользователя и генерирует игровой процесс

Геймпле́й (англ. gameplay) или игровой процесс — компонент игры, отвечающий за интерактивное взаимодействие игры и игрока. Геймплей описывает, как игрок взаимодействует с игровым миром, как игровой мир реагирует на действия игрока и как определяется набор действий, который предлагает игроку игра. Термин чаще употребляется в контексте компьютерных игр. Википедия

в реальном времени, включая физику, правила игры и графику.

Интересно отметить аппаратное обеспечение, на котором работает эта установка. Используя один графический процессор NVIDIA H100

Hopper — микроархитектура профессиональных графических процессоров класса Server/Datacenter представленная в марте 2022 года, и разработанная корпорацией NVIDIA Corporation в качестве преемника микроархитектуры Ampere. Она названа в честь Грейс Мюррей Хоппер (англ. Grace Murray Hopper) — американской учёной в области информатики и контр-адмирала Военно-морских сил США, которая была одной из первых программистов компьютера Марк I. Микроархитектура Hopper с тензорными ядрами была анонсирована в конце марта 2022 года и впервые появилась в ускорителе GPGPU-вычислений уровня дата-центра NVIDIA H100 с 80 Гбайт HBM3 памяти, который содержит порядка 80 млрд транзисторов. Ускорители NVIDIA H100 например используются в HPC-серверах Nvidia DGX H100 для машинного обучения систем искусственного интеллекта. Википедия

, эта модель Oasis с 500 миллионами параметров может работать с разрешением 720p при 20 генерируемых кадрах в секунду. Из-за ограничений ускорителей, таких как NVIDIA H100/B200, игровой процесс в разрешении 4K практически невозможен. Однако у Etched есть собственный ускоритель под названием Sohu, который специализируется на ускорении архитектур transformer. Восемь графических процессоров NVIDIA H100 могут обеспечить работу пяти моделей Oasis для пяти пользователей, в то время как восемь карт Sohu способны обслуживать 65 запусков Oasis для 65 пользователей. Это более чем 10-кратное увеличение возможностей вывода по сравнению с оборудованием NVIDIA только в случае одноразового использования. Ускоритель предназначен для запуска гораздо более крупных моделей, таких как будущие модели видеоигр с генеративным ИИ со 100 миллиардами параметров, которые могут выводить 4K 30 FPS, и все это благодаря 144 ГБ памяти HBM3E, что дает 1152 ГБ в конфигурации сервера с восемью ускорителями.

Что касается дизайна Oasis (показан ниже), он сильно отличается от чего-то вроде OpenAI Sora. В то время как большинство современных видеогенераторов ИИ создают предварительно отрендеренные сегменты, недавно разработанная система обеспечивает взаимодействие в реальном времени, обрабатывая каждый кадр по отдельности. В своей основе технология использует передовые архитектуры машинного обучения, включая специализированные нейронные сети и механизмы внимания, которые одновременно обрабатывают пространственные и временные данные. Такой подход позволяет ИИ сохранять согласованность, реагируя на ввод пользователя в реальном времени, демонстрируя понимание физики, которое позволяет осуществлять естественную манипуляцию объектами и конструирование в виртуальных пространствах. Исследовательская группа реализовала несколько технических усовершенствований для обеспечения плавной работы, таких как адаптивная обработка шума и специализированная вычислительная оптимизация. Заглядывая вперед, разработчики планируют расширить возможности системы для обработки более длинных последовательностей и более сложных симуляций, что позволит обеспечить гораздо более плавный игровой процесс, как раз вовремя для модели 4K. Oasis доступен для пользователей, чтобы попробовать здесь с системой очередей (так как любители ИИ тоже играют в игры).