SynVAE: нейросеть генерирует музыку из картины

13 сентября 2019

SynVAE: нейросеть генерирует музыку из картины

Synesthetic Variational Autoencoder (SynVAE) — это нейросеть, которая на основе изображения генерирует музыку. Модель обучалась unsupervised. SynVAE состоит из объединенных визуального VAE и MusicVAE. Изображение кодируется в музыку, а затем…

OpenAI создала нейросеть для генерации музыки

27 апреля 2019
Open AI создали нейросеть MuseNet для генерации музыки

OpenAI создала нейросеть для генерации музыки

Исследователи из Open AI представили нейросеть MuseNet, которая генерирует четырехминутные музыкальные композиции с использованием 10 разных инструментов. Модель может комбинировать музыку в разных стилях (от кантри до Моцарта). Нейросеть устроена…

Google Brain представили сеть Music Transformer для создания гармоничной музыки

18 декабря 2018

Google Brain представили сеть Music Transformer для создания гармоничной музыки

Нейросетям пока сложно создавать длинные музыкальные произведения. Это связано со сложной структурой музыки: большинство мелодий содержат разные мотивы, паттерны и повторения, которые при этом связаны единой композицией. Разработчики Google Brain…

Как работает вариационный автоэнкодер (VAE)

11 октября 2018
вариационный автоэнкодер vae

Как работает вариационный автоэнкодер (VAE)

В противоположность использованию нейросетей в качестве регрессоров или классификаторов, вариационный автоэнкодер (Variational Autoencoder – VAE) — генеративная модель, которая находит применение во многих областях исследований: от генерации новых человеческих лиц…