NVIDIA ускоряет разработку гуманоидной робототехники

Чтобы ускорить развитие гуманоидов в глобальном масштабе, NVIDIA сегодня объявила, что предоставляет ведущим мировым производителям роботов, разработчикам моделей искусственного интеллекта и производителям программного обеспечения набор услуг, моделей и вычислительных платформ для разработки, обучения и создания гуманоидных робототехники следующего поколения.

Среди предложений — новые микросервисы и платформы NVIDIA NIM для моделирования и обучения роботов, сервис оркестрации NVIDIA OSMO для выполнения многоэтапных рабочих нагрузок робототехники, а также рабочий процесс телеоперации с поддержкой искусственного интеллекта и моделирования, который позволяет разработчикам обучать роботов, используя небольшое количество человеческого труда. демонстрационные данные.

«Следующая волна искусственного интеллекта — это робототехника, и одна из самых интересных разработок — роботы-гуманоиды», — сказал Дженсен Хуанг, основатель и генеральный директор NVIDIA. «Мы совершенствуем весь стек робототехники NVIDIA, открывая доступ разработчикам гуманоидов и компаниям со всего мира к использованию платформ, библиотек ускорения и моделей искусственного интеллекта, лучше всего подходящих для их нужд».

Ускорение разработки с помощью NVIDIA NIM и OSMO
Микросервисы NIM предоставляют готовые контейнеры на базе программного обеспечения NVIDIA для вывода, которые позволяют разработчикам сократить время развертывания с недель до минут. Два новых микросервиса ИИ позволят робототехникам улучшить рабочие процессы моделирования генеративного физического ИИ в NVIDIA Isaac Sim, эталонном приложении для моделирования робототехники, созданном на платформе NVIDIA Omniverse.

Микросервис MimicGen NIM генерирует синтетические данные о движении на основе записанных телеуправляемых данных с устройств пространственных вычислений, таких как Apple Vision Pro. Микросервис Robocasa NIM генерирует задачи для роботов и среды, готовые к моделированию, в OpenUSD, универсальной платформе для разработки и совместной работы в трехмерных мирах.

Доступный сейчас NVIDIA OSMO — это облачный управляемый сервис, который позволяет пользователям организовывать и масштабировать сложные рабочие процессы разработки робототехники с использованием распределенных вычислительных ресурсов, как локально, так и в облаке.

OSMO значительно упрощает рабочие процессы обучения и моделирования роботов, сокращая время цикла развертывания и разработки с месяцев до недели. Пользователи могут визуализировать ряд задач и управлять ими, например генерировать синтетические данные, обучать модели, проводить обучение с подкреплением и внедрять циклическое тестирование программного обеспечения в больших масштабах для гуманоидов, автономных мобильных роботов и промышленных манипуляторов.

Улучшение рабочих процессов сбора данных для разработчиков роботов-гуманоидов
Обучение базовых моделей гуманоидных роботов требует невероятного количества данных. Одним из способов сбора демонстрационных данных с участием людей является использование телеоперации, но этот процесс становится все более дорогим и длительным.

Эталонный рабочий процесс телеоперации с поддержкой NVIDIA AI и Omniverse, продемонстрированный на конференции по компьютерной графике SIGGRAPH, позволяет исследователям и разработчикам искусственного интеллекта генерировать огромные объемы синтетических данных о движении и восприятии из минимального количества удаленно захваченных человеческих демонстраций.

Во-первых, разработчики используют Apple Vision Pro для съемки небольшого количества демонстраций с дистанционным управлением. Затем они моделируют записи в NVIDIA Isaac Sim и используют микросервис MimicGen NIM для создания синтетических наборов данных на основе записей.

Разработчики обучают модель гуманоидного фундамента Project GR00T реальными и синтетическими данными, что позволяет разработчикам сэкономить время и снизить затраты. Затем они используют микросервис Robocasa NIM в Isaac Lab, платформу для обучения роботов, чтобы генерировать опыт для переобучения модели робота. На протяжении всего рабочего процесса NVIDIA OSMO плавно распределяет вычислительные задания по различным ресурсам, экономя разработчикам недели административных задач.

Компания Fourier, производящая платформы для роботов общего назначения, видит преимущества использования технологии моделирования для синтетического создания обучающих данных.

«Разработка роботов-гуманоидов чрезвычайно сложна и требует невероятного количества реальных данных, утомительно собираемых из реального мира», — сказал Алекс Гу, генеральный директор Fourier. «Новые инструменты NVIDIA для моделирования и генеративного искусственного интеллекта помогут запустить и ускорить наши рабочие процессы разработки моделей».

Расширение доступа к технологиям NVIDIA для разработчиков гуманоидов
NVIDIA предоставляет три вычислительные платформы для облегчения разработки робототехники-гуманоида: суперкомпьютеры NVIDIA с искусственным интеллектом для обучения моделей; NVIDIA Isaac Sim построен на базе Omniverse, где роботы могут учиться и совершенствовать свои навыки в симулируемых мирах; и роботизированные компьютеры-гуманоиды NVIDIA Jetson Thor для запуска моделей. Разработчики могут получить доступ и использовать все или любую часть платформ для своих конкретных нужд.

Благодаря новой программе разработчиков роботов-гуманоидов NVIDIA разработчики могут получить ранний доступ к новым предложениям, а также к последним версиям моделей NVIDIA Isaac Sim, NVIDIA Isaac Lab, Jetson Thor и Project GR00T, универсальных моделей фундаментов гуманоидов.

«Boston Dynamics и NVIDIA имеют долгую историю тесного сотрудничества, направленного на расширение границ возможностей робототехники», — сказал Аарон Сондерс, технический директор Boston Dynamics. «Мы очень рады видеть, что плоды этой работы ускоряют развитие отрасли в целом, а программа раннего доступа — это фантастический способ получить доступ к лучшим в своем классе технологиям».

Availability
Разработчики могут присоединиться к программе разработчиков гуманоидных роботов NVIDIA уже сейчас, чтобы получить доступ к NVIDIA OSMO и Isaac Lab, а вскоре получат доступ к микросервисам NVIDIA NIM.

Источник: NVIDIA