Композиторы больше не нужны? Google представила нейросеть для генерации музыки по текстовым запросам и изображениям.

Развитие нейросетей и всего, что связано с ИИ, уже не остановить. Умные машины достигли такого уровня, при котором они могут заменить человека даже в творчестве. Например, недавно Microsoft представила систему VALL-E, которая имитирует голос — почти как в «Терминаторе». Google тоже выпустила свой продукт — ИИ, пишущий музыку.

Поисковой техногигант представил нейросеть MusicLM, которая может генерировать музыку любого жанра только по текстовому описанию. Причем в результате получается не простая полифония, а настоящая сложная композиция. Система может улавливать настроение и сочинять музыку по тематике — для аркадных игр, для погружения в транс и подобное. Для достижения таких способностей нейросеть обучали на реальных примерах — а именно, «заставили» ее прослушать 280 часов музыки разных жанров.

Компания пока не будет открывать доступ к нейросети, хотя внутреннее тестирование уже завершилось. Вероятно, потому, что MusicLM все еще обучается и требует множества оптимизаций для исключения проблем с авторскими правами. Разработчики утверждают, что в 1 % сгенерированных материалов им удалось найти целые отрывки композиций, на которых обучалась сеть.

Ссылка на наработки нейросети: https://google-research.github.io/seanet/musiclm/examples/