Нейросеть научили писать песни по принципу «что вижу, то пою»

4120
2 минуты на чтение
Исследователи из университета Торонто создали и обучили нейросеть, которая может создавать музыкальные произведения на основе изображений, пишет издание The Guardian. В режиме реального времени нейросеть анализирует фотографию, а затем создаёт музыкальный ряд и тексты песни. Чтобы проверить работу нейросети, авторы исследования «показали» ей фотографию рождественской ёлки. Вот что получилось:

https://vimeo.com/192711856

В своём исследовании учёные опираются на нейросеть, которую обучили создавать поп-песни. Эта нейросеть обучена на базу данных, хранящей 100 часов музыки. Программа не только умеет генерировать общий музыкальный фон, но и учитывает самые популярные последовательности аккордов и добавляет ударные.

После этого исследователи «научили» нейросеть распознавать фотографии — точно так же, на базе готовых фотографий с метками. Таким образом, искусственный интеллект распознает, что запечатлено на изображении и генерирует поток слов. Синтезированная таким образом песня очень напоминает песенку GLaDOS из первой части видеоигры Portal.
Кликни,
чтобы посмотреть видео
you-video
Почему-то с IP адресов других стран ничего не тормозит
Учёные планируют в будущем обучить нейросеть создавать более сложные песни. Уже сейчас существуют программы, способные синтезировать музыку и вокал, и вопрос в том, как скоро нейросети и искусственный интеллект начнёт заменять настоящих исполнителей или «вернёт к жизни» уже умерших?

 

Читайте также

Vocaloid: поющая программа

Ксения Аташева

29.01.2016

89864

Как из компьютерной программы, виниловой наклейки и пачки фанарта рождаются виртуальные звёзды, по которым сходят с ума меломаны всего мира.

Если вы нашли опечатку, пожалуйста, выделите фрагмент текста и нажмите Ctrl+Enter.

Статьи

Новости

«Кейпоп-охотницы на демонов» неожиданно возглавили прокат в США

Новости

Новые главы «Берсерка» будут такими же мрачными, как арка «Затмение»

Новости

Актёр «Вечных» подписался на 6 фильмов Marvel. Их не сняли
Провал фильма сильно ударил по Кумайлу Нанджани.

Новости

«10 отличных восточноевропейских фантастических фильмов» по версии Британского института кино
Есть как советская классика, так и ряд неожиданных забытых фильмов.

Новости

BBC о будущем «Доктора Кто»: «ТАРДИС никуда не денется»

Новости

Дафни Кин сыграет богиню Артемиду в третьем сезоне «Перси Джексона»

Новости

В Heroes of Might & Magic: Olden Era будет фракция в духе лавкрафтианских хорроров
Авторы также дали послушать отрывок одной из композиций.

Новости

Вы не поверите, но Hollow Knight: Silksong выйдет уже в сентябре!

Новости

Звезда «Разделения» пополнил каст нового «Человека-паука»

Новости

Утечка: тизер второго сезона аниме Devil May Cry
Показать ещё