Технология GelSight дает роботам осязание
Обработка и тактильной, и зрительной информации методами машинного обучения позволила добиться точного манипулирования мелкими объектами.
Восемь лет назад группа исследователей из Лаборатории компьютерных наук и искусственного интеллекта (CSAIL) Массачусетского технологического института представила новую технологию сенсоров GelSight, которая позволяет с помощью физического контакта c предметом получить подробную 3D-карту его поверхности.
Сейчас исследователи создали роботов, способных оценивать твердость поверхности и манипулировать маленькими предметами, совмещая визуальные и тактильные сведения о них.
Сенсор GelSight состоит из фрагмента прозрачной резины. Одна его сторона покрыта металлической краской. При контакте резина принимает форму объекта. Компьютерные алгоритмы распознают форму объекта. Нейросеть сопоставляет данные о деформации предметов с информацией о их твердости.
Робот, оснащенный сенсорами GelSight, в ходе эксперимента оценил твердость фруктов и овощей так же, как и люди.
Источники: news.mit.edu, nextbigfuture.com.