antony_w (antony_w) wrote,
antony_w
antony_w

Category:

Новая система сочиняет тексты для инструментальной музыки



Исследователи из Университета Ватерлоо разработали LyricJam — передовую вычислительную систему, которая генерирует тексты для живой инструментальной музыки.

Новая система LyricJam поможет артистам сочинять новые тексты, которые хорошо сочетаются с музыкой.

Цель нашего исследования — разработка систему, которая может генерировать тексты песен, отражающие настроение и эмоции, выражаемые через различные аспекты музыки. Речь идет об аккордах, используемых инструментах, темпе. Мы стремились создать инструмент, который музыканты могли бы использовать, чтобы черпать вдохновение для написания собственных песен. (Ольга Вечтомова, автор исследования)

Примеры текстов, созданных LyricJam для разных типов инструментальной музыки. Аудиоклипы представлены в виде спектрограмм, отражающих различные музыкальные характеристики. Предоставлено: Вечтомова, Саху и Кумар.

По сути, LyricJam представляет собой систему искусственного интеллекта. С точки зрения пользователя приложение очень простое: музыкальный исполнитель воспроизводит живую музыку, а система отображает строки текста, которые он генерирует в реальном времени в ответ на музыку, которую слышит. Сгенерированные строки сохраняются.


Примеры текстов, созданных LyricJam для разных типов инструментальной музыки. Аудиоклипы представлены в виде спектрограмм, отражающих различные музыкальные характеристики. Предоставлено: Вечтомова, Саху и Кумар.

Система, созданная исследователями, работает путем преобразования необработанных аудиофайлов в спектрограммы. Затем используются модели глубокого обучения для создания текстов песен, соответствующих музыке, которую они обрабатывали в реальном времени. Архитектура модели состоит из двух вариационных автоэнкодеров, один из которых предназначен для изучения представления музыкального звука, а другой — для изучения текстов.

Источник

Tags: искусственный интеллект, музыка
Subscribe

Posts from This Journal “искусственный интеллект” Tag

promo antony_w august 17, 2014 11:48 18
Buy for 10 tokens
Есть блог, в котором написано много постов про роботов: ссылка И там есть несколько статей о замене рабочих мест человека роботами: Уже к 2018 году роботы отберут у человека часть профессий Рабский труд без зарплаты Армия роботов: зачем она нужна обильной людьми Поднебесной и кому может…
  • Post a new comment

    Error

    default userpic

    Your IP address will be recorded 

    When you submit the form an invisible reCAPTCHA check will be performed.
    You must follow the Privacy Policy and Google Terms of use.
  • 1 comment