Google разработала модель искусственного интеллекта, создающую музыку на основе текстового описания. Алгоритм проекта MusicLM обучен на базе из 280 000 часов записей, благодаря чему ИИ генерирует композиции в любых жанрах.
MusicLM не только комбинирует жанры и инструменты, но и «пишет» композиции на основе абстрактных запросов. Так, например, в ходе тестирования искусственный интеллект успешно объединил танцевальную музыку и реггетон, придумал звучание для запроса «чувство трепета и благоговения» и скомпоновал трек с «космическим и потусторонним» звуком.
В отличие от ранее запущенной музыкальной нейросети Riffusion, MusicLM генерирует треки без использования наработок популярного ИИ Stable Diffusion. По словам Google, созданная ими модель генерирует треки на основе напева, свиста или изображений, и поддерживает так называемый «режим истории», в котором объединяются несколько совершенно разных запросов для создания «диджейских сетов».
Помимо этого ИИ Google умеет имитировать разный уровень владения музыкальным инструментом. В частности, алгоритм неплохо изображает начинающих, опытных и профессиональных музыкантов.
Тем не менее результаты MusicLM пока ещё далеки от идеальных. Так, например, некоторые композиции звучат слишком странно, при этом алгоритм далеко не всегда верно интерпретирует текстовые запросы.
Несмотря на интересную концепцию и публикацию результатов работы, искусственный интеллект не будет доступен широкому кругу пользователей, отметили в Google. Основной преградой для этого являются возможные судебные иски от правообладателей из-за схожести генерируемых композиций с реальными музыкальными произведениями. По словам компании, если искусственно генерируемая музыка получит особый правовой статус, MusicLM может стать открытым проектом.
Ознакомиться с результатами работы алгоритма можно на официальной странице проекта на платформе GitHub. На странице представлены десятки аудиопримеров, созданных на основе текстовых описаний, изображений, напевов и других вводных данных.
Несмотря на рост популярности нейросетей и искусственного интеллекта, способного выполнять различную творческую работу, успехи в создании алгоритмов нравятся далеко не всем. Так, например, известный музыкант Ник Кейв осудил умного чат-бота ChatGPT, написавшего песню «в стиле Ника Кейва». Певец назвал придуманный ИИ текст дерьмом и гротескной насмешкой над творчеством.
