Робот-поводырь с ИИ способен общаться с хозяином голосом

Роботизированные собаки-поводыри обрели голос благодаря большим языковым моделям. Теперь механические помощники способны не только прокладывать безопасный физический маршрут для слабовидящих, но и в реальном времени вести подробный диалог, описывая окружающую обстановку.
Автор Наука Mail
Робот-поводырь
Инновационная система не только безопасно ведет человека по маршруту, но и в реальном времени описывает окружающую обстановку. Источник: Jonathan Cohen

Инженеры из Бингемтонского университета (США) разработали роботизированную собаку-поводыря, которая при помощи ИИ может полноценно общаться с незрячими людьми. Новая система не только безопасно ведет человека по маршруту, но и в реальном времени описывает окружающую обстановку. Результаты исследования опубликованы в виде препринта на сайте arXiv.

Традиционные живые собаки-поводыри являются надежными спутниками для слабовидящих, однако их коммуникативные возможности строго ограничены биологией. В лучшем случае животное способно понимать около двух десятков базовых команд, но совершенно не может предупредить хозяина о специфике надвигающихся препятствий. Новая роботизированная платформа, интегрированная с большими языковыми моделями, навсегда устраняет этот барьер.

Ранее университетская команда уже научила четвероногих роботов базовому ориентированию в пространстве и правильной реакции на натяжение поводка. Теперь алгоритмы шагнули далеко вперед: машина ведет с пользователем непрерывный диалог, кардинально повышая его осведомленность о ситуации. Робот заранее озвучивает план движения, предлагает альтернативные маршруты и сообщает точное время, необходимое для достижения выбранной конечной цели.

Робот-собака
Робот заранее озвучивает план движения, предлагает альтернативные маршруты и сообщает точное время, необходимое для достижения выбранной конечной цели.Источник: Unsplash

В процессе самого перемещения электронный помощник ведет подробную аудиоэкскурсию. Он деликатно предупреждает о крутых поворотах, описывает геометрию коридоров и комментирует любые физические препятствия на пути. Это критически важно для людей, полностью лишенных зрения. Такая детальная и своевременная вербализация окружающей среды позволяет незрячему человеку чувствовать себя гораздо увереннее и безопаснее в незнакомых или сложных помещениях.

Для проверки эффективности технологии были проведены практические испытания с участием семи слепых добровольцев. Участникам предлагалось пройти по запутанному многокомнатному офисному зданию до конференц-зала, опираясь исключительно на голосовые подсказки механического поводыря. По итогам эксперимента все пользователи высоко оценили простоту общения и безоговорочное превосходство комбинированного подхода с аудиосопровождением.

Впечатленные восторженной реакцией добровольцев, разработчики планируют значительно расширить автономность своих мобильных устройств. Следующим техническим этапом станут масштабные тестирования на длинных дистанциях как внутри зданий, так и на оживленных городских улицах. Главная цель проекта заключается в полной и бесшовной интеграции таких умных машин в повседневную жизнь инвалидов по зрению.

Ранее Наука Mail рассказывала про экзоскелет, который помогает музыкантам сохранять синхронность.