Ученые из Гонконгского университета представили платформу RoboDojo для комплексной оценки систем управления роботами. Инструмент позволяет измерять эффективность алгоритмов в виртуальных и физических средах. Статья опубликована в журнале arXiv.
Воплощенный искусственный интеллект обучает машины воспринимать окружающую среду, рассуждать и автономно действовать в пространстве. Развитие этой отрасли тормозится отсутствием стандартизированных показателей оценки. Существующие методы проверок часто ограничиваются виртуальными симуляциями или проводятся на различном оборудовании с разными критериями. Алгоритмы, показывающие хорошие результаты в изолированных тестах, регулярно дают сбои в реальных условиях.
Платформа RoboDojo объединяет оценку на основе симуляции, тестирование физических роботов и сравнительный анализ политик управления. В разработке проекта приняли участие специалисты 20 ведущих мировых вузов. База платформы содержит 42 задачи для симуляций, 18 тестов для реальных роботов и 30 репрезентативных моделей управления. Инструмент позволит разработчикам создавать устойчивые алгоритмы для разных аппаратных конфигураций.
Система строго оценивает такие возможности машин, как обобщение данных, объем памяти, точность движений и выполнение долгосрочных задач. Первые тесты выявили значительный разрыв между производительностью робототехнических систем и возможностями человека. Лучшая модель ИИ достигла показателя успеха 8,8% в симуляции. В реальных испытаниях этот параметр составил 12,8%.
Интеграция ИИ в реальный мир
Человеческие показатели в аналогичных задачах составили 76,03% в симуляторе и 100% в реальном мире. Результаты указывают на необходимость создания более надежных алгоритмов для выполнения сложных многоэтапных операций. RoboDojo устраняет разрыв между впечатляющими демонстрациями нейросетей и их практическим применением. Платформа позволяет проводить измерения, результаты которых можно сравнить и верифицировать.
С момента запуска проект получил признание в мировой академической и промышленной среде. Ресурсы платформы с открытым исходным кодом зафиксировали 100 тыс. загрузок на профильном сервисе Hugging Face в течение первой недели. Инструмент стандартизированной оценки вызвал интерес у разработчиков благодаря прозрачности и воспроизводимости тестов. Это поможет наладить сотрудничество между исследовательскими центрами и производителями робототехники.
Внедрение единых стандартов стимулирует эволюцию воплощенного ИИ от концептуальных демонстраций к устойчивым приложениям. Платформа позволит создавать более безопасные, надежные и адаптируемые робототехнические системы. Разработчики планируют расширять базу сценариев для охвата большего числа бытовых и промышленных задач, полноценное тестирование ускорит интеграцию умных машин в повседневную жизнь.
Ранее крошечных роботов «научили» убирать микропластик из почвы и воды.