На конференции SIGGRAPH компания NVIDIA продемонстрировала эталонный процесс обучения ИИ роботов-гуманоидов с использованием телеопераций. В этом методе нейросеть имитирует движения оператора в реальном времени, а Apple Vision Pro помогает оцифровывать эти движения.
Разработчики переносят полученные данные в приложение NVIDIA Isaac Sim, где моделируют движения в виртуальной среде. Затем в микросервисе MimicGen NIM они создают синтетические данные о движениях на основе телеопераций с использованием Apple Vision Pro. Эти синтетические наборы используются для расширения базы данных ИИ робота-гуманоида.
Для обучения ИИ человекоподобного робота требуется огромное количество данных и значительные финансовые ресурсы. Гарнитура Apple необходима NVIDIA, поскольку она решает две важные проблемы: позволяет генерировать большое количество данных с помощью телеопераций и делает это относительно недорого.