Stable Audio: нейросеть для генерации музыки и звуков из текста от Stability AI

14 сентября 2023
Stable Audio - music generation AI

Stable Audio: нейросеть для генерации музыки и звуков из текста от Stability AI

Stability AI представила Stable Audio — нейросеть для генерации музыки и звуков по текстовой подсказке заданной пользователем длины. Stable Audio способна генерировать 95 секунд стереоаудио с частотой дискретизации 44,1 кГц…

Нейросеть обучили высокоточно отделять объект от фона

25 января 2022

Нейросеть обучили высокоточно отделять объект от фона

В Google разработали нейросеть, с высокой точностью отделяющую объект от фона на изображении. Модель используется в портретном режиме съемки на Pixel 6. При классической сегментации изображения каждый пиксель относится либо…

Нейросеть NASA обнаружила 301 экзопланету

29 ноября 2021

Нейросеть NASA обнаружила 301 экзопланету

NASA разработала нейронную сеть Exominer, идентифицирующую космические объекты по затуханию излучения от звезд. На основе данных миссии Kepler нейросеть обнаружила более 300 ранее неизвестных экзопланет. Когда планета проходит между Землей…

Нейросеть построила полную 3D-карту биологической клетки

9 октября 2021

Нейросеть построила полную 3D-карту биологической клетки

C помощью сверточной нейросети ученым впервые удалось осуществить полную 3D-реконструкцию биологической клетки на основе данных электронной микроскопии. Процесс реконструкции с помощью нейросети занимает несколько часов, что примерно в 100 000…

Нейросеть подтвердила подлинность картины да Винчи

31 августа 2021

Нейросеть подтвердила подлинность картины да Винчи

Сверточная нейросеть определила, что картина «Спаситель мира», авторство которой является предметом дебатов экспертов-искусствоведов, была написана Леонардо да Винчи. Теперь исследователи планируют применить нейросети к широкому классу других картин со спорным…

Нейросеть открыла новые пептиды для разработки лекарств

23 августа 2021

Нейросеть открыла новые пептиды для разработки лекарств

Исследователи MIT использовали сверточную нейросеть для поиска высокоактивных и нетоксичных пептидов. Нейросеть предложила неизвестные ранее пептиды, которые позволили в 50 раз увеличить скорость доставки препарата для лечения мышечной дистрофии и…

RatLesNetv2: нейросеть сегментирует поражение мозга на томографическом снимке

2 февраля 2020

RatLesNetv2: нейросеть сегментирует поражение мозга на томографическом снимке

RatLesNetv2 — это 3D сверточная нейросеть, которая выделяет зону поражения мозга на томографическом снимке. Исследователи обучали модель на томографических снимках мозга грызунов. По результатам экспериментов, RatLesNetv2 выдала более точные или…

BlendMask: нейросеть обходит state-of-the-art на задаче сегментации объектов

8 января 2020

BlendMask: нейросеть обходит state-of-the-art на задаче сегментации объектов

BlendMask — это нейросетевая модель для instance сегментации объектов на изображении. Модель выдает более точные границы объектов, чем Mask R-CNN, на COCO датасете при схожих параметрах обучения. При этом BlendMask…

AttoNet: компактные нейросети для обучения на мобильных девайсах

16 октября 2019

AttoNet: компактные нейросети для обучения на мобильных девайсах

AttoNets — это семейство нейросетевых моделей для обучения на мобильном устройстве. На макроуровне архитектура задается человеком, а на микроуровне модель оптимизирует структуру автоматически. Это позволяет частично автоматизировать разработку архитектуры сети,…

MRCNet: нейросеть считает людей в толпе с высоты

11 октября 2019

MRCNet: нейросеть считает людей в толпе с высоты

MRCNet — это сверточная нейросеть, которая по снимкам с воздуха определяет количество людей на снимке. Исследователи выложили датасет с фотографиями людных мероприятий с высоты DLR-ACD. На основной части снимков запечатлены…

AdapIS: нейросеть для адаптивной instance сегментации изображения

8 октября 2019

AdapIS: нейросеть для адаптивной instance сегментации изображения

AdapIS (Adaptive Instance Selection) — это end-to-end нейросеть для instance сегментации объектов на изображении, которая устойчива к разным классам объектов. На вход модель принимает изображение с координатами расположения объекта. На…

Double Anchor R-CNN: распознавание людей в толпе

1 октября 2019

Double Anchor R-CNN: распознавание людей в толпе

Double Anchor R-CNN — это нейросеть, которая распознает людей в толпе. Алгоритм отдельно для каждого человека на снимке распознает тело и голову, а затем соотносит разметку. Модель обходит предыдущие подходы…

FoodAI: нейросеть распознает калорийность еды по изображению

30 сентября 2019

FoodAI: нейросеть распознает калорийность еды по изображению

В SalesForce обучили нейросеть, которая по изображению еды предсказывает ее калорийность. Модель доступна через API сервис или в приложении Healthy 365. FoodAI обходит существующие подходы на задаче классификации типа блюда.…

CORnet-S: нейросеть моделирует работу мозга при распознавании объектов

20 сентября 2019

CORnet-S: нейросеть моделирует работу мозга при распознавании объектов

CORnet-S — это нейросеть, которая распознает объекты похожим на мозг примата образом.  Архитектура CORnet-S похожа на устройство вентрального визуального потока приматов. Вентральный поток отвечает за распознавание и классификацию наблюдаемого объекта.…

Brain2Char: нейросеть декодирует текст из показаний мозга

16 сентября 2019

Brain2Char: нейросеть декодирует текст из показаний мозга

Brain2Char — это нейросеть, которая из показаний мозга декодирует информацию в текст. Это первая модель, которая на основе электрокортикографии решает задачу посимвольного восстановления текста. Brain2Char объединяет в себе state-of-the-art модели:…

Как использовать нейросеть для диагностирования кожных заболеваний

16 сентября 2019
google2

Как использовать нейросеть для диагностирования кожных заболеваний

В Google обучили нейросеть, которая детектирует кожные заболевания на изображении. По результатам, модель достигает точности сертифицированного дерматолога при определении 26 типов кожных заболеваний. Точность определения кожных заболеваний терапевтами и дерматологами…

Нейросеть следит за взаимодействиями шимпанзе

16 сентября 2019

Нейросеть следит за взаимодействиями шимпанзе

Разработчики из Оксфорда опубликовали нейросеть, которая распознает шимпанзе и определяет их пол на видеозаписи. Модель применима для исследования поведения и взаимодействия животных. Предложенный подход в два раза меньше ошибался, чем…

CURE-TSD-Real: датасет для проверки системы по распознаванию объектов

13 сентября 2019

CURE-TSD-Real: датасет для проверки системы по распознаванию объектов

CURE-TSD-Real содержит модифицированные изображения дорожных знаков, которые сложно распознать стандартным нейросетям. Дообучение модели на таком наборе данных позволит оценить устойчивость ее предсказаний. Датасет был собран исследователями из Georgia Tech. Исследователи…

Матричные нейросети: новая модель для распознавания объектов

12 сентября 2019

Матричные нейросети: новая модель для распознавания объектов

Матричные сети (xNets) — это нейросетевая архитектура, которая специально адаптирована под задачу распознавания объектов на изображении. xNet учитывает пропорции объектов на изображении. На задаче key-point based распознавания объектов xNet обошла…

В Google Lens теперь можно прослушивать текст с изображения

6 сентября 2019

В Google Lens теперь можно прослушивать текст с изображения

В приложении Google Lens теперь есть функция прослушивания и перевода текста с изображения. Система сначала распознает куски текста на изображении, формирует структурированный текст из кусков, переводит текст и озвучивает перевод.…

PIFu: нейросеть моделирует фигуру человека в 3D

30 августа 2019

PIFu: нейросеть моделирует фигуру человека в 3D

PIFu — это end-to-end алгоритм, который восстанавливает 3D-модель одетого человека из одной фотографии. Метод обходит существующие решения на задаче генерации 3D-модели человека из одного изображения.  Метод восстанавливает 3D-модель человека в…