Gemini Robotics 2 управляет телом гуманоида от стоп до кончиков пальцев

Google DeepMind объявила о выходе новой версии своей модели искусственного интеллекта для робототехники — Gemini Robotics 2. Если предыдущая версия отвечала за управление лишь верхней частью тела гуманоида, то теперь система координирует движения всего корпуса — «от стоп до кончиков пальцев».

Полный контроль над телом

Благодаря поддержке движений всего тела роботы получают более широкий репертуар действий: они могут ходить, приседать, наклоняться и манипулировать предметами. В опубликованных Google видеороликах робот Apollo 2 компании Apptronik наклоняется, чтобы поднять лейку, а также находит и снимает с полки конкретные вещи.

В DeepMind признают, что роботам ещё есть куда расти в скорости движений, однако называют обновление важным шагом к навыкам, необходимым для выполнения сложных реальных задач, требующих согласованной работы всего тела.

Отдельно улучшена мелкая моторика: модель теперь управляет более сложными пятипалыми кистями. Это позволяет застёгивать пакет с зип-замком, завязывать мусорный мешок или выкручивать лампочку.

Рассуждающая модель и совместная работа

Параллельно обновлена Gemini Robotics ER (embodied reasoning) — модель на стыке зрения и языка, которая помогает роботам анализировать окружение, обрабатывать инструкции и выполнять многоэтапные задачи. Версия ER 2 лучше справляется с длительными задачами и «понимает, когда задача начинается и когда заканчивается».

Новая модель также позволяет нескольким роботам разных типов работать сообща. На одном из видео Apollo 2 руководит двуруким роботом Google, поручая ему складывать инструменты в контейнер при уборке гаража.

В DeepMind называют Gemini Robotics ER 2 своей «самой безопасной моделью для робототехники на сегодняшний день»: она надёжнее распознаёт присутствие людей поблизости, вызывает защитные механизмы и останавливает робота, если кто-то подходит слишком близко.

Кроме того, компания доработала Gemini Robotics On-Device Model, работающую локально на самом роботе без подключения к интернету. Теперь она быстрее адаптируется к новым «телам», включая устройства с принципиально иной формой, набором датчиков и числом степеней свободы.

Источник: The Verge