Человек в шлеме дополненной реальности смог увидеть будущие движения робота
Система позволяет человеку понимать намерения робота.
Исследователи из Университета Кюсю разработали новый способ отображения намерений робота. Человек в очках дополненной реальности видит проекцию его будущих положений. В помещении, где проходило тестирование системы, установлены 18 высокоскоростных инфракрасных камер Vicon, отслеживающих положение небольших инфракрасных маркеров, девять камер глубины Kinect и несколько двумерных лидаров. Система управления собирает данные с датчиков и команды пользователя и отвечает за построение маршрута робота.
Для работы использовался шлем дополненной реальности Microsoft Hololens, в котором пользователь видит реальный мир с виртуальными полупрозрачными элементами. Направление взгляда пользователя отслеживается локально на шлеме при помощи камер и стандартного для этой задачи метода SLAM.
Благодаря тому, что все, находящееся в комнате, оцифровано, пользователь видит, к примеру, содержимое холодильника, даже если не открывает дверцу. Домашний робот-помощник тоже оцифрован, поэтому его маршрут можно накладывать на реальность. Помимо положения робота в комнате, пользователь увидит, каким будет расположение его рук в конечной точке.