В University of California робота обучили манипулировать тканью

5 марта 2021

В University of California робота обучили манипулировать тканью

Исследователи из University of California и Honda Research Institute обучили робота складывать ткань. Алгоритм основывается на фреймворке для обучения визуальной динамики объектов на основе RGB изображений, — Visual Foresight. Такие…

Facebook используют нейросети для отслеживания движений рук в Oculus

29 сентября 2019

Facebook используют нейросети для отслеживания движений рук в Oculus

Facebook Reality Labs и Oculus разработали первую нейросеть, которая отслеживает движения руки в VR и опирается на данные с монохромных камер. Система не использует методы распознавания глубины изображения и дополнительного…

Нейросеть от Google AI распознает жесты в реальном времени

22 августа 2019

Нейросеть от Google AI распознает жесты в реальном времени

Goole AI опубликовали подход для распознавания жестов в реальном времени с камеры телефона. Модель реализована в MediaPipe, открытом фреймворке для обработки видео- и аудиоданных. Текущие state-of-the-art решения нуждаются в вычислительной…

Speech2Gesture: нейросеть генерирует жесты на основе речи

20 июня 2019

Speech2Gesture: нейросеть генерирует жесты на основе речи

Исследователи из UC Berkley разработали нейросеть, которая на основе речи человека генерирует жесты. Модель обходит state-of-the-art решения по количественной метрике. Исследователи опубликовали датасет с видеозаписями монологов и размеченными жестами, на…

Компьютерная игра на основе нейронных сетей помогает учить язык жестов

14 декабря 2018

Компьютерная игра на основе нейронных сетей помогает учить язык жестов

Канадский стартап Stradigi AI представил игру на базе сверточных нейронных сетей, которая помогает учить американский вариант языка жестов. Его используют люди с нарушениями слуха в Америке и Канаде. Команде удалось создать…