Nvidia представила GR00T 2 для обучения роботов точным движениям по видео
Изображение: OpenAI
Nvidia 9 ноября представила открытую ИИ-модель GR00T 2, которая помогает роботам осваивать точные движения рук по видео с участием людей. Компания сообщает, что использовала при обучении 100 000 часов видео от первого лица и теперь открывает эти записи для всех.
В испытаниях Nvidia модель хотя бы раз выполнила 40 из 50 задач без обучения конкретной задаче, после одного показа в среднем справлялась в 71% случаев, после пяти — в 95%. Однако в своей научной работе компания уточняет: для проверки отобрали задачи, которые модель и так хорошо осваивала.
Перед движением GR00T 2 прогнозирует, как действие изменит видимую ей картину. При обучении использовали не только видео с людьми, но и данные, полученные от роботов. По заявлению Nvidia, такой подход позволяет роботам учиться у людей и переносить навыки между роботами разной конструкции.
GR00T 2 уже тестируют три компании, но ни одна пока не объявила о внедрении в производство, сообщает The Next Web:
- Foxconn использует модель для помощи в сборке ИИ-серверов;
- Siemens проверяет её на заводских задачах. Ранее компания испытывала человекоподобного робота с технологиями Nvidia в течение восьмичасовой заводской смены;
- Nexuni пробует применять модель для стирки.
Одновременно Nvidia выпустила Isaac Lab 3.0, инструмент с открытым исходным кодом для обучения роботов в симуляции. По данным компании, в одном из тестов обучение с его помощью шло до 2,5 раза быстрее.
