Apple Vision Pro работает в тандеме с платформой NVIDIA Omniverse для обучения человекоподобных роботов.
Обучение моделей ИИ для роботов — ресурсозатратный и дорогой процесс из-за того, что необходимо большое количество данных и огромные вычислительные мощности. Но американский техногигант NVIDIA нашел элегантное решение проблемы.
NVIDIA взяла за основу процесс телеуправления (захват и запись человеческих движений роботом) и подключила его к своим платформам NVIDIA AI и Omniverse. Для телеуправления компания использовала гарнитуру дополненной реальности Apple Vision Pro.
Как это работает? Инженеры с помощью Apple Vision Pro «показывают» роботу движения, а полученные данные моделируются в ПО NVIDIA Isaac Sim. Затем к реальным данным о физических движениях добавляются дополнительные записи для обучения, сгенерированные с помощью ИИ MimicGen.
Вся платформа называется NVIDIA OSMO Service.
Сейчас с помощью ее NVIDIA обучает гуманоидных роботов Project GR00T.
Источник: 9to5mac
Читайте далее: Представлен смартфон для «новичков» Lava Yuva Star