Nvidia GR00T 2 обучает роботов тонким навыкам по видео с людьми
- Открытая модель GR00T 2 обучалась на данных роботов и 100 000 часах видео от первого лица, которые Nvidia открывает для всех.
- В тестах Nvidia модель выполнила 40 из 50 задач без обучения конкретной задаче; успех составил 71% после одной демонстрации и 95% после пяти.
- Foxconn применяет GR00T 2 при сборке ИИ-серверов, Siemens тестирует для заводских работ, а Nexuni — для стирки; планов на производство компании не объявляли.
Почему это важно: По словам Nvidia, модель позволяет роботам перенимать навыки у людей и передавать их между роботами разной конструкции.
Nvidia представила GR00T 2 — открытую ИИ-модель, которая помогает роботам осваивать тонкие навыки работы руками и частично обучена на 100 000 часов видео с людьми. В тестах Nvidia она показала средний уровень успеха 95% при пяти демонстрациях на задачу. Foxconn, Siemens и Nexuni уже тестируют её.
Nvidia представила GR00T 2 — ИИ-модель, которая помогает роботам осваивать тонкие навыки работы руками, в том числе наблюдая за видео с людьми, сообщила компания в понедельник. Модель была анонсирована на конференции Conference on Robot Learning в Остине (Техас).
Nvidia называет GR00T 2 открытой »моделью мира и действий» — она прогнозирует, как её действия изменят то, что она видит, ещё до начала движения.
Модель обучалась на данных роботов и видео с людьми, включая 100 000 часов съёмки от первого лица, которые Nvidia открывает для всех желающих. По словам Nvidia, это позволяет роботам перенимать навыки у людей и передавать их между роботами с разной конструкцией. Стартапы вроде Maxinsights платят людям за то, чтобы те снимали свои бытовые дела, с той же целью.
В тестах Nvidia GR00T 2 хотя бы раз выполнила 40 из 50 задач без какого-либо обучения конкретной задаче. После одной демонстрации задачи модель в среднем справлялась в 71% случаев, а после пяти — в 95%. В собственной статье Nvidia отмечается, что эти задачи были отобраны из тех, которые модель уже могла хорошо освоить.
Foxconn, которая теперь получает большую часть выручки от ИИ-серверов, использует GR00T 2 при их сборке. Siemens тестирует модель для заводских работ, а Nexuni пробует её для стирки белья. Пока ни одна из компаний не заявила о планах применять её в производстве.
Nvidia также выпустила Isaac Lab 3.0 — свой инструмент с открытым исходным кодом для обучения роботов в симуляции. По словам компании, в одном из тестов он обучает до 2,5 раза быстрее. Среди партнёров — Walden Robotics, которая стартовала с 300 млн долларов в июле.
»Для меня агентная робототехника — самое захватывающее технологическое достижение со времён интернета в 1995 году», — заявил Кен Голдберг, профессор робототехники Калифорнийского университета в Беркли, работавший с Nvidia над двумя из проектов.
Более ранние модели GR00T уже лежат в основе разрабатываемых роботов, включая гуманоида LG, который ожидается в 2027 году. Siemens также испытала гуманоида на базе Nvidia во время восьмичасовой заводской смены.
