В мире робототехники человеческий фактор становится все менее важным благодаря искусственному интеллекту. Исследовательская группа NVIDIA представила свое новое творение — Eureka, агент искусственного интеллекта, работающий на основе GPT-4, который обучает роботов выполнять различные задачи с помощью алгоритмов подкрепления.

Одним из самых заметных достижений Eureka является то, что он научил роботизированную руку делать трюки с вращением ручки так же хорошо, как и человек (робот исполняет трюки даже лучше, чем большинство людей). Eureka также обучил четвероногих роботов, гибкие манипуляторы, и другие роботизированные системы открывать ящики, пользоваться ножницами, ловить мячи и выполнять еще около 30 разных задач.

По словам исследователей NVIDIA, алгоритмы подкрепления, основанные на пробах и ошибках, которые использует ИИ, на 80 процентов эффективнее тех, которые написаны экспертами-людьми. В результате производительность роботов также улучшилась более чем на 50 процентов. Стоит отметить также и то, что Eureka самообучается на основе опыта выполнения задач, внося изменения в функции вознаграждения по своему усмотрению.

Исследовательская группа NVIDIA уже опубликовала библиотеку алгоритмов Eureka, призвав всех желающих испытать их на NVIDIA Isaac Gym, приложении для физического моделирования для исследований в области машинного обучения.

Модель, в которой роботы обучают роботов без активного участия человека, кажется, становится все более популярной. В мае 2023 года в журнале Transactions on Machine Learning Research была опубликована статья о новой системе под названием SKILL (Shared Knowledge Lifelong Learning), которая позволила системам искусственного интеллекта изучать 102 разных навыка, включая диагностику заболеваний по рентгенограммам грудной клетки и определение видов цветов. Системы искусственного интеллекта делили свои знания — выступая, в некотором смысле, в качестве учителей — друг с другом по сети связи и смогли овладеть каждым из 102 навыков.

Исследователи из таких учебных заведений, как Массачусетский технологический институт и Университет Бристоля, также добились успеха, в частности, в использовании искусственного интеллекта для обучения роботов манипуляциям с предметами.

Последняя модель искусственного интеллекта NVIDIA — впечатляющий пример того, как роботы могут научиться сложным и творческим навыкам с помощью алгоритмов подкрепления. Технология открывает новые возможности для развития робототехники и искусственного интеллекта в будущем.