Один робот-мозг, тысяча рук: как модель GEN-1 от Generalist учится использовать любой инструмент

Ключевые моменты

• Модель GEN-1 от Generalist, единый AI-мозг для роботов, теперь поддерживает примерно 9000 вариаций робототехнических рук и крепёжных приспособлений.
• Модель была предварительно обучена на более чем 500 000 часов реальных данных взаимодействия робота с охватом широкого спектра типов инструментов.
• GEN-1 может переключиться на другой инструмент в середине задачи и адаптировать свой подход без переспециализации.
• Generalist измеряет, насколько каждый новый инструмент сдвигает внутренние параметры модели, чтобы выявить пробелы в обучающих данных.
• Компания не опубликовала результаты, прошедшие рецензирование; все цифры и утверждения поступают из официальных объявлений Generalist.

Робот, который может поднять венчик, отложить его, взять лопатку и продолжить готовку, звучит как научная фантастика. Компания Generalist, занимающаяся AI в робототехнике, говорит, что её новейшая модель движется в этом направлении.

На этой неделе компания подробно объяснила, как GEN-1, её модель-фундамент (представьте себе универсальный AI-мозг, управляющий телом робота), теперь работает с необычайно широким спектром концевых эффекторов. Концевой эффектор — это всё, что находится на кончике робота-манипулятора: схват, отвёртка, щипцы, овощечистка или щётка. Большинство робототехнических систем построены вокруг одного фиксированного инструмента. GEN-1 разработан для работы с множеством из них.

Как одна AI-модель учится использовать столько разных инструментов?

Generalist обучила GEN-1 на более чем 500 000 часов реальных данных взаимодействия робота, охватывающих тысячи типов инструментов. Компания провела намеренную параллель с языком: точно так же, как модель, обученная на французском и испанском, может передавать знания между ними, модель, обученная на венчиках и лопатках, может строить общее понимание того, как предметы ведут себя при прикосновении, подталкивании или захвате.

Каждый инструмент учит модель чему-то новому. Электрическая отвёртка вращается быстрее, чем могут пальцы. Щипцы сгибаются и пружинят. Металлический скребок работает против плоской поверхности, а не оборачивается вокруг предмета. Нож для резки коробок требует стабильного, контролируемого давления вдоль фиксированной линии. Вместе, как говорит Generalist, эти опыты создают то, что компания называет «универсальными сенсомоторными представлениями» — своего рода физический здравый смысл, который переносится на разные инструменты.

На данный момент модель прошла обучение на примерно 9000 вариаций инструментов, согласно компании.

Может ли робот действительно переключать инструменты во время работы?

Да, по крайней мере в собственных тестах Generalist. Компания продемонстрировала замену инструмента на робота-манипуляторе, пока GEN-1 всё ещё работала. Модель восприняла новое крепление, откорректировала свой план и продолжила двигаться к той же цели. Без переспециализации. Без перезагрузки.

Это работает, говорит Generalist, потому что обучение на смешанных данных заставляет модель обращать внимание на инструмент, который она в данный момент держит, а не предполагать наличие фиксированного.

Как Generalist узнаёт, что модели ещё нужно выучить?

Компания отслеживает, насколько новый инструмент сдвигает внутренние параметры GEN-1, называемые весами модели, когда модель тонко настраивается (специально обучается) на этом инструменте. Большой сдвиг указывает на то, что модель обнаружила что-то действительно новое. Небольшой сдвиг означает, что существующие знания уже это охватили.

Венчики оказались более сложными, чем овощечистки. Модель столкнулась с трудностями при работе с тонкой проволочной геометрией венчика, что означает её визуальная обработка нуждалась в большем обучении на тонких, разреженных объектах. Это открытие подсказывает Generalist, где собирать больше данных.

Это внутренние результаты компании. Как сообщило The Robot Report, Generalist пока не опубликовала рецензируемые исследования, подтверждающие эти результаты, поэтому независимая проверка по-прежнему ожидается.

Что это значит для людей, которые используют роботов на работе?

На данный момент это технология на этапе исследований. Но направление имеет значение. Если единая AI-модель действительно может управлять разнообразными инструментами, заводы, кухни и склады могут в итоге потребовать меньше специализированных роботов и меньше дорогостоящих переконфигураций при изменении задачи.

Заявленное видение Generalist: не робот с одной рукой, а один интеллект в сочетании с любым инструментом, который требуется для работы.

Часто задаваемые вопросы

Доступна ли GEN-1 для покупки или использования сегодня?

Generalist не объявила о выпуске коммерческого продукта. GEN-1 — это в настоящее время модель исследовательского уровня; компания публикует демонстрации возможностей, расширяя свой обучающий набор данных.

Означает ли это, что антропоморфные робототехнические руки становятся менее важными?

Не обязательно, но Generalist утверждает, что руки с пятью пальцами должны быть одним из вариантов среди многих, а не целью по умолчанию. Специализированные инструменты часто превосходят человекоподобные руки для конкретных работ, и компания считает, что способная AI-модель должна знать, какой выбрать.