NVIDIA разработала агент искусственного интеллекта под названием Eureka, который с высокой скоростью обучает роботов сложным навыкам.

Согласно исследовательской статье, программы вознаграждения, разработанные Eureka, превосходят по результатам программы, написанные людьми, в более чем 80% задач, что приводит к улучшению средней производительности роботов на более чем 50%. Используя модель GPT-4 LLM и генеративный искусственный интеллект для создания программного кода, который вознаграждает роботов в процессе их обучения с подкреплением. В отличие от традиционных методов, Eureka не требует специальных подсказок или заранее определенных шаблонов вознаграждения, адаптируясь к целям и предпочтениям разработчика.

Используя ускоренное графическими процессорами (GPU) моделирование в Isaac Gym, Eureka может быстро тестировать и оптимизировать функции вознаграждения для различных робототехнических задач и предметных областей. Затем ИИ использует свои результаты, чтобы научить LLM улучшать создание функций вознаграждения, становясь самоулучшающимся агентом. Обучение Eureka распространяется на широкий спектр роботов, от четвероногих и двуногих до квадрокоптеров и ловких рук, позволяя им выполнять разнообразные задачи.

Один из участников проекта Линси «Джим» Фан заметил: «Eureka представляет собой уникальное сочетание больших языковых моделей и технологий ускоренного моделирования NVIDIA GPU. Мы считаем, что Eureka позволит беспрецедентный контроль над ловкими роботами и предоставит новый способ создания физически реалистичной анимации для художников».