Оценка позы / Нейросети и глубокое обучение

Google Try-on: примерка одежды онлайн

18 июня 2023

Google Try-on: примерка одежды онлайн

Google представила Try-on – диффузионную модель, позволяющую пользователям сервиса «Покупки» примерить одежду на моделях с различным телосложением и оттенком кожи. Модель меняет одежду в один клик, фотореалистично воспроизводит драпировку, облегание,…

Texformer: оценка 3D-позы на основе трансформера

7 ноября 2021

Texformer: оценка 3D-позы на основе трансформера

Texformer — фреймворк для оценки 3D-позы по одному изображению с использованием архитектуры трансформера. Точность восстановления позы у Texformer выше, чем у state-of-the-art моделей на основе сверточных нейросетей. Архитектура модели приведена…

EuroCity Persons: датасет дорожного трафика европейских стран

9 сентября 2021

EuroCity Persons: датасет дорожного трафика европейских стран

Датасет EuroCity Persons содержит более 47000 фотографий улиц 12 стран с аннотациями пешеходов и транспортных средств. Датасет нацелен на улучшение моделей распознавания объектов, в том числе в условиях окклюзии. EuroCity…

Библиотеки Dlib и Mediapipe для трекинга ключевых точек лица

7 сентября 2021

Библиотеки Dlib и Mediapipe для трекинга ключевых точек лица

Трекинг лица используется в приложениях дополненной реальности, медицины, маркетинга и безопасности. В статье приводится описание двух библиотек, позволяющих осуществить обнаружение ключевых точек лица в реальном времени. Dlib Основным языком Dlib…

LiftPose3D: оценка 3D-позы по одному изображению

9 августа 2021

LiftPose3D: оценка 3D-позы по одному изображению

Группа ученых из Федеральной политехнической школы Лозанны представила LiftPose3D — нейронную сеть, восстанавливающую 3D-позу по изображению с одного ракурса. Модель была успешно протестирована на лабораторных животных и позволяет выполнить оценку…

Нейросеть генерирует видеолекции на основе аудиозаписей

8 июля 2019

Нейросеть генерирует видеолекции на основе аудиозаписей

Исследователи из Udacity разработали нейросеть LumièreNet, которая на основе аудиоклипов синтезирует видеолекции в высоком разрешении. Примеры сгенерированных видеозаписей находятся по ссылкам: первый пример, второй пример. В отличие от предшествующих моделей,…

В Samsung AI разработали новый метод для трекинга позы человека на видео

16 мая 2019

В Samsung AI разработали новый метод для трекинга позы человека на видео

Исследователи из Samsung AI и Сколково представили новую архитектуру нейросети для трекинга позы человека на видео. Метод обходит state-of-the-art подходы в случае видеосъемки с нескольких камер. Оценка позы человека в…

Open source модель определения 3D позы по 2D изображению

18 марта 2019

Open source модель определения 3D позы по 2D изображению

Оценка позы человека в трехмерном пространстве находит применение во многих задачах: беспилотный транспорт, виртуальная реальность, спортивная аналитика и видеонаблюдение. Задача восстановления 3D позы человека по изображению встречается с большими трудностями,…

Новые датасеты для оценки позы в 3D

12 ноября 2018

Новые датасеты для оценки позы в 3D

Оценка позы в 3D — фундаментальная задача компьютерного зрения. Способность компьютера распознавать людей на изображениях и видео применяется в беспилотном вождении, распознавании действий, взаимодействии человека с компьютером, дополненной реальности и робототехнике. В…

Новый метод переноса движений из видео на виртуального персонажа

9 ноября 2018

Новый метод переноса движений из видео на виртуального персонажа

Создание реалистичных, похожих на настоящих людей персонажей — важная задача компьютерной анимации. Анимация персонажей применяется в создании мультфильмов, компьютерных игр, спецэффектов в кино и виртуальной реальности. Ранние работы Анимация персонажей…

Метод точной оценки позы в 6DoF от исследователей Nvidia

13 сентября 2018

Метод точной оценки позы в 6DoF от исследователей Nvidia

Разработчики Nvidia создали алгоритм DeepIM, который превосходит в точности существующие методы оценки положения объекта в 6DoF, что важно для роботов и VR приложений. Роборука предварительно анализирует положение объекта в пространстве и предказывает,…

«Танцуют все!» — невероятное качество Motion Transfer для видео

30 августа 2018

«Танцуют все!» — невероятное качество Motion Transfer для видео

Плохо умеете танцевать? Больше не проблема! Удивите своих друзей ошеломляющим видео, где вы танцуете, как суперзвезда. Исследователи из Беркли предложили новый способ motion trasfer для видео. Они утверждают, что способны перенести исполнение…

DeepLabCut — новый инструмент для оценки позы и захвата движений

30 августа 2018

DeepLabCut — новый инструмент для оценки позы и захвата движений

Исследователи из Гарварда разработали DeepLabCut — инструмент для автоматической оценки позы и разметки движущихся частей тела животных и людей. Обычно, чтобы отследить движения, исследователи записывают видео и вручную покадрово размечают изображения. В…

Сегментация людей на фотографии в сложных условиях

23 августа 2018

Сегментация людей на фотографии в сложных условиях

Понимание сцены — один из святых граалей сomputer vision. Проводится множество исследований, чтобы достичь абсолютного понимания того, что происходит на картинке. Получение любой дополнительной информации из изображения позволяет продвинуться по…

Neurohive Digest. Нейронные сети и искусственный интеллект. Выпуск 2

5 августа 2018

Neurohive Digest. Нейронные сети и искусственный интеллект. Выпуск 2

Ссылки на материалы из выпуска: 1. Искусственный интеллект помогает прогнозировать урожай в Аргентине и Бразилии 2. Моделирование новой позы человека на изображении с помощью нейросети.

Метод моделирования новых поз человека на изображении

19 июля 2018

Метод моделирования новых поз человека на изображении

Люди обладают удивительной способностью воображения. Воображение и обучение на опыте лежат в основе нашего интеллекта. Обе эти способности связаны – воображение работает благодаря памяти и опыту. Поэтому мы можем определить…

Определение позы человека на изображении с помощью FBI

16 июля 2018

3D pose estimation based on 2D joints and Forward-or-Backward Information (FBI) for each bone

Определение позы человека на изображении с помощью FBI

Беспилотное управление, виртуальная реальность, общение человека с компьютером, видеонаблюдение – области, в которых возможность определять позу человека на изображении играет ключевую роль. Значительные достижения в этой сфере были сделаны благодаря…

Pose estimation в реальном времени прямо в браузере с TensorFlow.JS

10 июля 2018

Heatmap and offset vector simplification

Pose estimation в реальном времени прямо в браузере с TensorFlow.JS

Что же такое определение позы (pose estimation)? Определение позы — это метод компьютерного зрения, который оценивает фигуры людей на изображениях и видео и определяет, где находятся основные суставы. Технология не распознает, кто конкретно представлен на…

“Видеть сквозь стены” — исследователи научились определять позу человека за стеной

21 июня 2018

“Видеть сквозь стены” — исследователи научились определять позу человека за стеной

Возможность видеть сквозь стены всегда считалась сверхспособностью, и не раз становилась идеей научно-фантастических фильмов. В 2011 году исследователи из Массачусетского технологического института (MIT) объявили о разработке радара, показывающего в режиме…