Все статьи

Новости

DeText: фреймворк для ранжирования документов с помощью BERT

DeText — это фреймворк для обучения моделей обработки естественного языка. DeText позволяет решать задачи ранжирования, классификации и генерации с помощью state-of-the-art нейросетевых архитектур. Функционал библиотеки Среди функционала библиотеки: Автоматическое извлечение…
State-of-the-art

SipMask: новый state-of-the-art в instance сегментации

SipMask — это одноступенчатая нейросеть для instance сегментации объектов на изображении. Модель обходит предыдущие одноступенчатые state-of-the-art подходы на датасете COCO test-dev. В сравнении с TensorMask, SipMask дает прирост AP в…
Новости

ScaNN: метод поиска близких векторов от Google AI

ScaNN — это библиотека для поиска близких векторов. Разработкой библиотеки занимались исследователи Google AI. Описание проблемы Поиск совпадающих строк в базе данных обычно осуществляется с помощью скриптовых языков, как SQL.…
Фреймворки

Libra: фреймворк для обучения ML-моделей в несколько строк кода

Libra — это альтернативный фреймворк для обучения ML-моделей. Основным преимуществом фреймворка является простота в использовании для пользователей без технического бэкграунда в сравнении с существующими популярными фреймворками. Процесс обучения модели занимает…
Новости

Нейросеть редактирует изображение по текстовому описанию

Исследователи из ETH Zurich разработали нейросеть, которая позволяет контролировать генерируемое изображение с помощью высокоуровневых атрибутов и текстовых описаний. На вход модели можно подать маску сегментации объектов с их классами. Нейросеть…
State-of-the-art

CFBI: коллаборативная сегментация объектов на видеозаписи

CFBI — это нейросеть, которая сегментирует объекты на заднем и переднем планах в видеозаписи. Нейросеть обучалась частично с привлечением размеченных данных (semi-supervised). CFBI отличается от предыдущих подходов тем, что модель…
Приложения

Pantomime: нейросеть анимирует изображение лица

Pantomime — это сервис для создания дипфейк-стикеров. Система использует нейросеть для анимации входного изображения с лицом. С помощью Pantomime можно анимировать как лица людей, так и животных. Разработкой сервиса занималась…
Фреймворки

MCT: набор инструментов для презентации ML-моделей

Model Card Toolkit (MCT) — это набор инструментов для поддержки разработчиков в сборе информации для карточек моделей. Карточка модели описывает ML-модель на разных уровнях, чтобы повысить прозрачность используемых подходов. В…
State-of-the-art

TransCoder: нейросеть переводит код программы на другой язык

TransCoder — это нейросеть, которая переводит код программы с одного языка на другой. Модель не нуждается в размеченных параллельных данных для обучения. На данный момент TransCoder успешно переносит функции на…
Датасеты

REVISE: инструмент для оценки смещений в датасетах с изображениями

REVISE — инструмент для оценки смещений в датасетах с изображениями. REVISE позволяет пользователю учесть неравномерность данных и оценить, насколько уместно использовать тот или иной датасет в рамках целевой задачи. Инструмент…
Датасеты

AViD: датасет для распознавания действий на видео

AViD — это публичный датасет с анонимизированными видеозаписями из разных стран. Датасет предназначен для задачи распознавания действий. AViD состоит из видео, где человек выполняет одно действие. Разнообразие в датасете обеспечивается…
Приложения

LipSync: веб-приложение от YouTube для соревнований по подпеванию

LipSync — это веб-приложение от YouTube, которое тестирует, как хорошо пользователь подпевает под песню. Система основывается на нейросети, которая распознает движения лица и губ во время подпевания и оценивает их…
Новости

Нейросеть распознает 3D позу человека в реальном времени

Оценка позы человека и распознавание действия — это связанные задачи, потому как обе проблемы зависят от представления и анализа тела человека. Тем не менее большинство существующих моделей решают эти проблемы…
Фреймворки

Voila: библиотека для интерактивных виджетов в Jupyter ноутбуке

Voilà — это библиотека для создания интерактивных виджетов в Jupyter ноутбуках. Инструмент превращает Jupyter ноутбук в автономное веб-приложение. В отличие от ноутбуков, сконвертированных в HTML, каждый пользователь, который подключается в…
Новости

Нейросеть от FAIR повышает разрешение изображения в 16 раз

FAIR опубликовали нейросетевую модель, которая повышает разрешение изображения в 16 раз. Нейросеть принимает на вход изображение с разрешением в 960×540. Затем модель апсемплит изображение до разрешения в 3840×2160 в реальном…
Новости

Нейросеть генерирует видеозаписи с говорящими головами

Исследователи из University of Rochester опубликовали нейросеть, которая генерирует видеозаписи с говорящими людьми на основе аудиозаписи. Предложенная модель генерирует более реалистичные видеозаписи, чем state-of-the-art подходы. При этом в нейросети эксплицитно…
Новости

ContraCode: нейросеть находит функционально схожий код

ContraCode — это нейросеть для поиска функционально схожего кода программ. Модель предобучали с помощью contrastive pre-training подхода. Предобученную нейросеть затем дообучили на задачах вывода типов и суммаризации кода. Во время…