Нейросеть научили писать песни по принципу «что вижу, то пою»

4118
2 минуты на чтение
Исследователи из университета Торонто создали и обучили нейросеть, которая может создавать музыкальные произведения на основе изображений, пишет издание The Guardian. В режиме реального времени нейросеть анализирует фотографию, а затем создаёт музыкальный ряд и тексты песни. Чтобы проверить работу нейросети, авторы исследования «показали» ей фотографию рождественской ёлки. Вот что получилось:

https://vimeo.com/192711856

В своём исследовании учёные опираются на нейросеть, которую обучили создавать поп-песни. Эта нейросеть обучена на базу данных, хранящей 100 часов музыки. Программа не только умеет генерировать общий музыкальный фон, но и учитывает самые популярные последовательности аккордов и добавляет ударные.

После этого исследователи «научили» нейросеть распознавать фотографии — точно так же, на базе готовых фотографий с метками. Таким образом, искусственный интеллект распознает, что запечатлено на изображении и генерирует поток слов. Синтезированная таким образом песня очень напоминает песенку GLaDOS из первой части видеоигры Portal.
Кликни,
чтобы посмотреть видео
you-video
Почему-то с IP адресов других стран ничего не тормозит
Учёные планируют в будущем обучить нейросеть создавать более сложные песни. Уже сейчас существуют программы, способные синтезировать музыку и вокал, и вопрос в том, как скоро нейросети и искусственный интеллект начнёт заменять настоящих исполнителей или «вернёт к жизни» уже умерших?

 

Читайте также

Vocaloid: поющая программа

Ксения Аташева

29.01.2016

89580

Как из компьютерной программы, виниловой наклейки и пачки фанарта рождаются виртуальные звёзды, по которым сходят с ума меломаны всего мира.

Если вы нашли опечатку, пожалуйста, выделите фрагмент текста и нажмите Ctrl+Enter.

Статьи

Новости

СМИ: Microsoft отменила Perfect Dark, Everwild и MMORPG от авторов The Elder Scrolls Online

Новости

«Это происходит вновь» — первый тизер третьего сезона НФ-сериала «Вторжение»

Новости

В финале «Железного сердца» появился злодей, о котором говорят с выхода «ВандыВижна»

Новости

Слив: первый тизер «Одиссеи» Кристофера Нолана

Новости

Первые фото со съемок фэнтези-блокбастера «Руслан и Людмилы»
Премьера в 2027 году.

Новости

Первый трейлер фильма «Бегущий человек» по Стивену Кингу
Премьера ожидается 7 ноября.

Новости

Алеша, Илья и Добрыня в первом трейлере мультфильма «Три богатыря и свет клином»
Премьера уже в декабре.

Новости

«Я не астронавт» — первый трейлер экранизации «Проекта "Аве Мария"»

Новости

Зомби-хоррор «28 лет спустя» заработал больше первой и второй частей
Стоил, правда, он тоже дороже

Новости

«Тёмный рыцарь», «Братство кольца» и «Чёрная Пантера» — в Голливуде выбрали 100 лучших фильмов XXI века
«Рататуй» тоже попал!
Показать ещё