Робокентавром для спасательных операций научились управлять с помощью жестов
Разработчикам удалось оснастить робота системой, которая позволяет управлять робокентавром, не используя дополнительное оборудование. Теперь человек сможет управлять роботом, не проходя дополнительную подготовку.
Группа инженеров из Европы представила несколько месяцев назад робота-кентавра, который предназначен для выполнения сложных работ, необходимых при проведении спасательных операций. Совместная работа разработчиков из Итальянского технологического института и Боннского университета обладает необходимыми качествами для удобной работы удаленного оператора в сложных условиях. На этой неделе стало известно, что ученые доработали робота, теперь им можно управлять при помощи жестов.
У робота есть две руки с адаптерами, позволяющими подключать манипуляторы различных типов. Робот частично автономный и может выполнять некоторые действия самостоятельно без помощи оператора. Предполагалось, что человек будет управлять роботом при помощи экзоскелета и педалей, но разработчики представили новую систему управления без дополнительного оборудования.
В системе используется камера глубины ASUS Xtion PRO для распознавания движений. Кадры видео обрабатываются алгоритмом в реальном времени алгоритмом OpenPose, часто применяемым для подобных задач. После этого на их основе создается двумерную модель тела. Затем система переносит данные двумерной модели на трехмерную и отдает эти данные планировщику движений робота.
Теперь человек сможет управлять робокентавром, не проходя дополнительную подготовку. С помощью Centauro можно выполнять сложные задачи, требующие обработки движений пальцев рук человека. Для этого у робота есть интерфейсы для замены манипуляторов на концах рук.
