fbpx
  • Ботов научили самостоятельно одеваться, используя обучение с подкреплением

    Ученые из Технологического Института Джорджии научили анимационных персонажей одеваться самостоятельно. Боты умеют надевать виртуальные футболки и куртки, а также одеваться с помощью ассистента. Технология поможет создавать реалистичную компьютерную графику и в будущем может повлиять на разработку роботов, которые будут помогать одеваться больным или людям с ограниченными возможностями.

    Обучение с подкреплением

    Для тренировки ботов команда использовала обучение с подкреплением. В функции вознаграждения бот получал дополнительные очки, если правильно просовывал голову в воротник, держал край рукава, не разрывал ткань. Исследователи добавили физический движок, чтобы имитировать реалистичное взаимодействие с тканью (вытягивание, растяжение и др.). Кроме того, ученые использовали подход sequence to sequence, разделив большую задачу по надеванию крутки на несколько мелких. То есть, на этапе просовывания руки в рукав бот уже понимал, какую задачу нужно выполнить следующей, чтобы продвинуться дальше.

    Пока учёные работали только с одеждой для верхней части тела. Обучение ботов, например, надеванию брюк — следующая по сложности задача, потому что требует включения баланса в контроллер.  

    Результаты исследования будут представлены на конференции SIGGRAPH Asia 2018, которая пройдет в Токио с 4 по 7 декабря.