Роботы NVIDIA: от вращения ручки до диагностики заболеваний

NVIDIA Research представила Eureka - искусственный интеллект на базе GPT-4, который обучает роботов выполнению различных задач с помощью алгоритмов вознаграждения. Одним из наиболее заметных достижений Eureka стало обучение роботической руке трюкам с вращением ручки на уровне человека, и, как показано в видео на YouTube, даже лучше многих из нас.

Eureka также обучила четвероногих роботов, роботов с ловкими руками, роботов-помощников и других роботов выполнять почти 30 различных задач, включая открывание ящиков, использование ножниц, ловлю мячей. По данным NVIDIA Research, программы вознаграждения на основе метода проб и ошибок Eureka на 80% эффективнее программ, написанных экспертами-людьми. Это привело к улучшению производительности роботов более чем на 50%. Eureka также самооценивается на основе результатов обучения, корректируя функции вознаграждения по мере необходимости.

NVIDIA Research опубликовала библиотеку алгоритмов Eureka, приглашая всех желающих протестировать их на платформе NVIDIA Isaac Gym, предназначенной для исследований в области обучения с подкреплением.

Идея обучения роботов другими роботами становится всё более популярной. В мае 2023 года была опубликована статья в журнале Transactions on Machine Learning Research, в которой представлена новая система SKILL (Shared Knowledge Lifelong Learning). Система позволяет ИИ осваивать 102 различных навыка, включая диагностику заболеваний по рентгеновским снимкам грудной клетки и определение видов цветов.

Искусственные интеллекты обменивались своими знаниями, действуя как учителя, и смогли освоить каждый из 102 навыков. Исследователи из таких учебных заведений, как MIT и Университет Бристоля, также добились успеха в использовании ИИ для обучения роботов манипуляциям с объектами.