Команда Google DeepMind выпустила модель Gemini Robotics 2. Главное отличие новой версии от предшественников — переход от управления исключительно «верхней половиной» робота к полному контролю над всем его телом, «от стоп до кончиков пальцев».
Команда Google DeepMind выпустила модель Gemini Robotics 2. Главное отличие новой версии от предшественников — переход от управления исключительно «верхней половиной» робота к полному контролю над всем его телом, «от стоп до кончиков пальцев».
Новая архитектура синхронизирует движения, позволяя двуногим андроидам приседать, наклоняться, тянуться и ходить, одновременно манипулируя объектами. В демонстрационных видео робот Apollo 2 от компании Apptronik легко нагибается за лейкой для полива цветов и находит нужные вещи на верхних полках.
Разработчики совершили прорыв в мелкой моторике, адаптировав модель под сложные пятипалые кисти. Теперь роботы под управлением Gemini Robotics 2 способны выполнять задачи, требовавшие человеческой точности: застёгивать пакетики с зиплок-замком, завязывать мусорные пакеты и аккуратно выкручивать лампочки. Хотя представители DeepMind признают, что роботам всё еще не хватает скорости, они называют этот релиз ключевым этапом для выполнения сложных реальных задач, где нужна полная координация тела.
Вместе с базовым контроллером обновилась и визуально-языковая система пространственного мышления Gemini Robotics ER 2. Она помогает машинам анализировать окружение и выполнять многошаговые инструкции. Новая версия лучше держит фокус при долгих сценариях работы и теперь чётко понимает, когда задача только началась, а когда уже полностью завершена. Более того, ER 2 научили организовывать командную работу разных типов машин: например, гуманоид Apollo 2 может в процессе уборки гаража отдавать прямые указания двуручному стационарному манипулятору.
Особый акцент Google сделала на безопасности и автономности. Gemini Robotics ER 2 стала самой безопасной моделью компании: она мгновенно распознаёт находящихся рядом людей и задействует протоколы экстренной мягкой остановки, если человек подходит слишком близко. А локальная версия Gemini Robotics On-Device, работающая прямо на железе робота без подключения к интернету, теперь умеет за считанные минуты адаптироваться к совершенно новым типам корпусов — с принципиально другой формой, набором сенсоров и степенями свободы.
Релоцировались? Теперь вы можете комментировать без верификации аккаунта.