Манипулятор-соперник ускоряет машинное обучение

Конструкторы для обучения детей робототехнике

Share Button

Исследователи из Университета Карнеги — Меллона и компании Google представили новый подход к обучению роботов. В рамках этого подхода используется не только робот, обучающийся основной задаче, но и мешающий ему соперник, который вынуждает робота совершенствоваться. Работа была представлена на конференции ICRA 2017 и доступна на сайте arXiv.org

Манипулятор-соперник ускоряет машинное обучение

В настоящее время роботов зачастую учат осваивать какие-либо действия при помощи машинного обучения. Компания Google не первый год занимаются обучением манипуляторов захвату различных предметов. Один из предложенных методов обучения предусматривал использование нескольких роботов, которые параллельно выполняли похожую задачу и отсылали на сервер данные о ее выполнении, которые помогали улучшить нейросеть. Благодаря такому параллельному накоплению опыта роботы обучались в несколько раз быстрее, чем один робот.

В новой работе исследователи опробовали иной подход к обучению манипулятора надежному захвату предметов. После захвата робот тряс объект, чтобы проверить, насколько крепко он удерживается роботом.

В систему был добавлен робот-соперник, который пытался выхватить предмет из первой руки. Причем, как и основная, захватывающая рука, он также был подключен к самообучающейся нейросети.

Когда соперничающая рука отбирала предмет у захватывающей, обе системы получали опыт: одна из них положительный, а другая отрицательный. Таким образом, исследователи, по сути, воспроизвели классическое противоборство щита и меча, которое в конечном итоге значительно увеличило эффективность обеих систем. Так, после обучения с соперничеством доля успешных захватов возросла с 68% до 82%.

На конференции ICRA 2017 были представлены и другие разработки по машинному обучению, к примеру исследователи из Массачусетского технологического института разработали систему, которая позволяет переносить навыки между роботами разной конструкции.

Источник: nplus1.ru.

Share Button

Нет комментариев.

Оставить комментарий

© 2014-2017 Занимательная робототехника, Гагарина Д.А., Гагарин А.С., Гагарин А.А. All rights reserved / Все права защищены. Копирование и воспроизведение в любой форме запрещено.
Наверх