NVIDIA использует Apple Vision Pro для обучения своих роботов

В NVIDIA пояснили, что обучение базовых моделей гуманоидных роботов «требует огромного количества данных». Например, телеоперация, то есть получение демонстрационных данных о человеке, является дорогостоящим и сложным процессом.

Этот метод позволяет исследователям и разработчикам ИИ генерировать обширные массивы синтетических данных о движениях и восприятии, основанных на ограниченном количестве дистанционно снятых человеческих демонстраций.

Чтобы захватить небольшое количество телеопераций, разработчики используют Apple Vision Pro, утверждают в NVIDIA:

Затем они моделируют записи в NVIDIA Isaac Sim и используют микросервис MimicGen NIM для создания синтетических данных на основе этих записей. Разработчики обучают базовую модель робота-гуманоида Project GR00T совмещая реальные и синтетические данные, что позволяет существенно сэкономить время и снизить затраты.

Компания Apple представила Vision Pro на ежегодной конференции для разработчиков WWDC 2023 в июне прошлого года. Гарнитура вызвала массу откликов и мемов в сети. Лучшие из них мы собрали в отдельном материале.

Издание «Код Дурова» провело тестирование Apple Vision Pro и подробно описало в обзоре возможности «первого пространственного компьютера Apple», комфорт использования и его потенциал по изменению мира.

 

Источник