Южнокорейскую робоперчатку научили предугадывать намерения пользователя
Устройство считывает данные с камеры, установленной на очках человека, использующего роботизированную перчатку.
Исследователи из Сеульского университета опубликовали работу, в которой рассказали о простом методе прогнозирования планируемых движений исключительно по изображению с камеры, направленной на руки пользователя и захватываемые объекты. Они использовали перчатку Exo-Glove Poly, которая состоит из полимерной основы, внутри которой расположены тросы, натяжение которых вызывает сжатие руки, и самодельные очки, на которых установлена камера, поле зрения которой приблизительно совпадает с центром поля зрения человека.
Программным обеспечением стала сверточная нейросеть ResNet 50. На ее основе была создана двухстадийная нейросеть, для обучения которой исследователи попросили здоровых добровольцев с камерой и электромиографическими датчиками на руке хватать объекты. В результате был получен датасет из 45004 изображений, которые были поделены на «хватание», «разжимание» или «отсутствие действия».
Источник: NPlus1.