Компания 1X, которую поддерживает OpenAI, представила видео, на котором её роботы на колёсах выполняют различные задачи в офисе, реагируя на голосовые команды. Управляют ими, отдавая команды на обычном, естественном языке. Многофункциональные роботы пока еще медленно, но вполне уверенно справляются с заданиями и переходят от одной задачи к другой. 1X устояла перед соблазном отредактировать демонстрационное видео, поэтому в нем показана реальная скорость работы ее роботов.

Компания Halodi Robotics, основанная в 2014 году в Норвегии, изначально занималась разработкой универсальных роботов для работы рядом с людьми. В 2019 году компания открыла второй офис в Калифорнии, где была представлена предсерийная версия робота-гуманоида по имени Eve. В 2022 году Halodi переименовалась в 1X и начала сотрудничество с OpenAI, чтобы объединить робототехнику и ИИ. Это поможет производить роботов способных к самообучению.

Сейчас компания обучает Eve выполнять полезные задачи в офисе. Роботы должны понимать как естественный язык, так и физическое пространство, чтобы выполнять реальные задачи. В марте 1X сообщила о разработке автономной модели, способной выполнять множество задач, таких как распаковка сумок, уборка разлитых жидкостей и складывание рубашек.

Разработчики отметили, что пока успехи в одном типе задач могут негативно влиять на выполнение других. Увеличение количества параметров могло бы решить эту проблему, но при этом бы растянуло время обучения. Внедрение голосового интерфейса позволяет операторам комбинировать отдельные задачи в более сложные комплексные действия, создавая целые цепочки связанных задач.

Эрик Джанг из компании 1X в блоге пояснил, что управление роботами через высокоуровневый языковой интерфейс открывает новые возможности для сбора данных. Вместо использования VR для управления одним роботом оператор теперь может отдавать команды сразу нескольким на высоком уровне, а низкоуровневые алгоритмы будут выполнять конкретные действия для достижения этих высокоуровневых целей. Поскольку команды высокого уровня подаются редко, операторы могут даже управлять роботами удалённо.

Роботы Eve в представленном видео полностью контролируются нейронной сетью. Оно снято без использования графики, ускоренной съёмки или заранее запрограммированных траекторий. Следующим шагом в развитии станет интеграция моделей, таких как GPT-4o, VILA и Gemini Vision в роботов, чтобы повысить их функциональность и точность.