Нейросеть научили писать песни по принципу «что вижу, то пою»

2 декабря 2016
Фото аватара
02.12.2016
2459
0 минут на чтение
Учёные научили нейросеть писать музыку по принципу «Что вижу, то пою»

Исследователи из университета Торонто создали и обучили нейросеть, которая может создавать музыкальные произведения на основе изображений, пишет издание The Guardian. В режиме реального времени нейросеть анализирует фотографию, а затем создаёт музыкальный ряд и тексты песни. Чтобы проверить работу нейросети, авторы исследования «показали» ей фотографию рождественской ёлки. Вот что получилось:

В своём исследовании учёные опираются на нейросеть, которую обучили создавать поп-песни. Эта нейросеть обучена на базу данных, хранящей 100 часов музыки. Программа не только умеет генерировать общий музыкальный фон, но и учитывает самые популярные последовательности аккордов и добавляет ударные.

После этого исследователи «научили» нейросеть распознавать фотографии — точно так же, на базе готовых фотографий с метками. Таким образом, искусственный интеллект распознает, что запечатлено на изображении и генерирует поток слов. Синтезированная таким образом песня очень напоминает песенку GLaDOS из первой части видеоигры Portal.

Учёные планируют в будущем обучить нейросеть создавать более сложные песни. Уже сейчас существуют программы, способные синтезировать музыку и вокал, и вопрос в том, как скоро нейросети и искусственный интеллект начнёт заменять настоящих исполнителей или «вернёт к жизни» уже умерших?

 

Читайте также

Vocaloid: поющая программа 4

Vocaloid: поющая программа

Как из компьютерной программы, виниловой наклейки и пачки фанарта рождаются виртуальные звёзды, по которым сходят с ума меломаны всего мира.

Статьи

Фантастический подкаст 10
0
30222
Ловим ворона в тёмном городе Алекса Пройаса в 127 выпуске «Фантастического подкаста»

И сидит, сидит зловещий, Ворон чёрный, Ворон вещий

«Майор Гром: Игра»: крепкие орешки рыцаря-суперкопа 3
0
65059
«Майор Гром: Игра». Крепкие орешки рыцаря-суперкопа

Бодрая супергероика с петербургским колоритом

Сериал «Шугар»: неонуар с вот-это-поворотами 4
0
114854
Сериал «Шугар»: неонуар с вот-это-поворотами

Как детектив с Колином Фарреллом обманывает ожидания — и раздвигает границы жанров

Артур Конан Дойл как фантаст. Конан-литератор
0
123655
Артур Конан Дойл: фантаст, врач и путешественник. Конан-литератор

Он писал про Холмса для денег, а фантастику — из интереса.

«Пацан против всех»: слуховой аппарат на асфальте 4
0
156756
«Пацан против всех»: слуховой аппарат на асфальте

Разудалый мордобой с картонными персонажами в плоском мире.

Обзор Harold Halibut — кукольного мультфильма, который захотел быть игрой
0
161286
Обзор Harold Halibut — кукольного мультфильма, который захотел быть игрой

Harold Halibut — Bioshock из шишек и желудей, точнее, из полимерной глины и ламповости.

Был ли Ясукэ самураем? И почему он не нравится японцам? Объясняем
0
211829
Был ли Ясукэ самураем? И почему он раздражает японцев? Объясняем

Рассказываем все, что известно о темнокожем самурае.

Художница Светлана Пикуль: прекрасные героини, симпатичные герои и монстры в метро 3
0
335500
Художница Светлана Пикуль: прекрасные героини, симпатичные герои и монстры в метро

Беседа о маленьких историях, творческой свободе и вдохновении в метро

Спецпроекты

Сообщить об опечатке

Текст, который будет отправлен нашим редакторам: