Человекоподобных роботов научили выполнять цепочки заданий

Норвежская компания 1X показала новое видео с человекоподобными роботами EVE. Они научились выполнять цепочки заданий, повинуясь командам оператора.

На записи несколько роботов делают уборку в офисе. Они поднимают разбросанные вещи, вытирают стол, собирают грязную посуду. 

1X стремится создать робота, который может выполнять задачи под управлением одной нейросети. Однако пока инженеры не могут полностью решить проблему забывания при обучении. Добавление новых данных для улучшения выполнения одной задачи часто негативно влияет на выполнение других выученных задач. Это связано с использованием небольшой нейронной модели. Увеличение размера может решить эту проблему, но замедлит обучение.

Для ускорения этого процесса в 1X разработали голосовой интерфейс. С его помощью инженеры задают алгоритм действия сразу нескольким роботам. Теперь специалисты планируют адаптировать для этих целей зрительно-языковые модели GPT-4o и VILA.