Все статьи

State-of-the-art

EfficientPS: state-of-the-art модель для паноптической сегментации

EfficientPS — это нейросетевая модель для паноптической сегментации объектов на изображении. На данный момент модель обходит state-of-the-art подходы на датасетах Cityscapes, KITTI, Mapillary Vistas и IDD. Паноптическая сегментация Одним из…
Новости

BiT: подход для обучения представлений изображений

Big Transfer — это подход для предобучения представлений изображений. Предобученную модель затем можно использовать для дообучения на собственной задаче. Такой формат обучения называется transfer learning. Использование transfer learning оправдано, в…
Фреймворки

DeepFaceLab: инструмент для генерации дипфейков

DeepFaceLab — это опенсорсная система для создания дипфейков. Репозиторий проекта имеет 3 тысячи форков и 14 тысяч звезд на GitHub. Система рассчитана одновременно на пользователей без знаний о фреймворках глубокого…
Датасеты

Hateful Memes: контест по распознаванию оскорбительных мемов от FAIR

Hateful Memes датасет состоит более чем из 10 тысяч примеров оскорбительных мемов. Разработкой датасета занимались исследователи из FAIR. FAIR лицензировали изображения из Getty Images, чтобы исследователи могли использовать датасет в…
Новости

IntelliCode Compose: нейросеть дополняет код с помощью Transformer

IntelliCode Compose — это инструмент для мультиязычного дополнения кода от Microsoft. Система предсказывает синтаксически корректную последовательность токенов кода по контексту предыдущих строчек. Модель обучали на 1.2 миллиардах строчек кода. В…
Фреймворки

Nlp: библиотека для задач обработки естественного языка

Исследователи из HuggingFace опубликовали библиотеку nlp с метриками и датасетами для задач обработки естественного языка. Библиотека позволяет работать с NLP-задачами в NumPy, Pandas, PyTorch и TensorFlow. Подробнее про nlp Nlp…
State-of-the-art

Модель распознаёт действия на видеозаписи без учителя

Исследователи из DeepMind обучили генеративную модель, которая сегментирует действия на видеозаписи. Модель обучается распознавать действия без реальной разметки действий на видеозаписи. Несмотря на свою простоту, алгоритм выдает сравнимые с state-of-the-art…
Новости

Нейросеть восстанавливает 3D-модель человека из видеозаписи

Предыдущие методы для детализированной оценки глубины человека по видеозаписи часто требуют размеченные тренировочные данные. Исследователи представляют self-supervised метод, который обучается на YouTube без разметки глубины. Это упрощает процесс сбора данных…
Новости

SLaQ: модель для векторного представления графов

Исследователи из Google AI предлагают метод для широкомасштабного представления графов в виде векторов. Понимание различий и схожестей между комплексными датасетами — это один из актуальных вопросов в работе с данными.…
Датасеты

SCITLDR: датасет для суммаризации научных статей

В AllenAI предложили новую задачу по автоматической генерации кратких выдержек из научных статей. Чтобы облегчить исследования на эту тему, исследователи опубликовали датасет SCITLDR. Датасет содержит 3.9 тысячи выдержки. Для каждой…
Новости

Нейросеть учится классифицировать объекты, как ребенок

Исследователи из CMU предложили новый метод обучения ML-классификаторов, который схож с тем, как родители обучают детей. Модель сначала учится различать более общие классы объектов. Например, кошек от собак. Затем дообучается…
Датасеты

Mapillary опубликовали датасет для распознавания мест

Mapillary Street-level Sequences Dataset (MSLS) — это самый крупный датасет с изображениями для предсказания мест. Датасет содержит 1.6 миллионов изображений, для каждого из которых доступны метаданные местности. Изображения мест снимали…
Новости

Нейросеть предсказывает глубину сцены на видеозаписи

Исследователи из Virginia Tech и FAIR разработали нейросеть, которая предсказывает глубину кадров видеозаписи. Одним из применений является использование предсказаний нейросети для добавления спецэффектов к видеозаписи. По результатам экспериментов, предложенный подход…
Новости

Jukebox: нейросеть от OpenAI генерирует песни

Jukebox — это нейросеть от OpenAI, которая генерирует песни. Модель принимает на вход жанр, артиста и текст песни. На выходе нейросеть отдает аудиозапись с сгенерированной песней. Тысячи примеров сгенерированных песен…
Новости

TAPAS: поиск ответа на вопрос в табличных данных с помощью BERT

TAPAS — это инструмент для поиска ответа на вопрос в табличных данных. В основе системы лежит архитектура BERT. Модель кодирует вопрос на естественном языке совместно с структурой табличных данных. На…
Архитектуры

NBDT: интерпретируемая нейросеть на основе решающих деревьев

Исследователи предложили интерпретируемую нейросеть, которая основана на архитектуре решающих деревьев и выдает сравнимые с state-of-the-art предсказания. Код проекта и предобученные модели доступны в открытом репозитории на GitHub. Глубокое обучение применяется…
Новости

Как обучать модель с несколькими функциями потерь одновременно

Исследователи из Google AI предложили метод для обучения модели на множестве функций потерь одновременно. Loss-conditional обучение помогает при отборе оптимального распределения коэффициентов в функции потерь. В части задач машинного обучения…
Новости

ALAE: автоэнкодер генерирует изображения наравне с GAN

Adversarial Latent Autoencoder (ALAE) — это нейросетевая модель для генерации изображений. В основе ALAE лежит архитектура автоэнкодера. ALAE учитывает последние улучшения по обучению GAN. Исследователи разработали два автоэнкодера: один с…
Приложения

Panacea: инструмент для защиты от атак на почтовые ящики

Panacea — это система, которая использует NLP модели для защиты почтовых ящиков от атак злоумышленников. Если система классифицирует сообщение как злонамеренное, она отвечает на него с помощью модуля диалоговой системы.…
Датасеты

StereoSet: датасет для обучения непредвзятых языковых моделей

StereoSet — это датасет для тестирования предобученной языковой модели на непредвзятость. Модель тестируется на наличие стереотипов о гендере, профессии, расе и религии. Языковые модели отражают реальность. Они обучаются на корпусах…