NVIDIA ACE обеспечивает взаимодействие с искусственным интеллектом в Mecha BREAK

NVIDIA ACE — это революционный набор цифровых человеческих технологий, который оживляет цифровых людей с помощью генеративного ИИ. С момента своего дебюта на Computex 2023 в технологической демонстрации Ramen Shop возможности ACE стремительно развивались.

На Gamescom 2024 мы анонсировали нашу первую цифровую человеческую технологию на устройстве — небольшую языковую модель, улучшающую разговорные способности игровых персонажей. Мы также анонсировали, что первой игрой, демонстрирующей эти ACE и цифровые человеческие технологии, станет Mecha BREAK от Amazing Seasun Game, оживляющая персонажей и обеспечивающая более динамичный и захватывающий игровой процесс на ПК GeForce RTX AI.

Небольшая языковая модель, специально созданная для ролевых игр
Первая в мире цифровая языковая модель NVIDIA для устройств на базе человеческих технологий под названием Nemotron-4 4B Instruct предназначена для ролевых игр и обладает ведущими возможностями генерации дополненной поисковой обработки и вызова функций, что позволяет игровым персонажам реагировать на действия геймеров, более интуитивно понимать инструкции игрока и выполнять более точные и значимые действия.

Nemotron-4 4B Instruct доступен как NVIDIA NIM для облачного и on-device развертывания разработчиками игр. NIM оптимизированы для низкого использования памяти, предлагая более быстрое время отклика и предоставляя разработчикам способ использовать преимущества более 100 миллионов ПК и ноутбуков на базе GeForce RTX.

Технологии ACE продемонстрированы в первой игре Mecha BREAK
Mecha BREAK, разработанная Amazing Seasun Games, дочерней игровой компанией Kingsoft Corporation, реализовала NVIDIA Nemotron-4 4B Instruct NIM, работающую на устройстве, в первой демонстрации игровых взаимодействий на базе ACE. Кроме того, NVIDIA Audio2Face-3D NIM и Whisper, автоматическая модель распознавания речи OpenAI, обеспечивают анимацию лица и распознавание речи, работающие на устройстве, в то время как Elevenlabs обеспечивает голос персонажа через облако.

Mecha BREAK — многопользовательская игра с мехами, которая позволяет игрокам выбирать из разнообразных мехов, настраивать внешний вид и сражаться с колоссальными боевыми машинами на опасной местности. В демонстрационной версии ACE игроки могут взаимодействовать с игровыми персонажами на естественном языке, в частности с механиком игрока. Попросите совета о целях, идеальном мехе для задачи и многом другом, прежде чем быстро обновить покраску своего меха для максимального блеска на поле боя.

«Мы рады продемонстрировать мощь и потенциал ACE NIM в Mecha BREAK, используя Audio2Face и NVIDIA Nemotron-4 4B Instruct для значительного улучшения погружения в игру», — сказал Крис Квок, генеральный директор Amazing Seasun Games.

Perfect World Games исследует новейшие цифровые технологии человека
NVIDIA ACE и цифровые технологии человека продолжают расширять свое присутствие в игровой индустрии. Глобальный издатель и разработчик игр Perfect World Games развивает свою демонстрационную версию NVIDIA ACE и цифровых технологий человека Legends с новыми возможностями зрения на основе искусственного интеллекта.

В демоверсии персонаж Юнь Ни может видеть геймеров и идентифицировать людей и объекты в реальном мире с помощью камеры компьютера, работающей на ChatGPT-4o, добавляя слой дополненной реальности к игровому процессу. Эти возможности открывают новый уровень погружения и доступности для игр на ПК.

NVIDIA ACE: оживляем цифровых персонажей
Возможности ACE, NVIDIA NIM и наших поддерживающих технологий постоянно развиваются, помогая разработчикам создавать более насыщенные, захватывающие впечатления и более интеллектуальные инструменты для взаимодействия с клиентами. Узнайте больше о NVIDIA ACE, будущих разработках и программах раннего доступа здесь. И следите за обновлениями на GeForce.com, чтобы получать будущие обновления о внедрении ACE в игры.

Источник: NVIDIA