29 января 2023, 14:45 Технологии

Google создала нейросеть MusicLM, которая генерирует музыку по текстовому описанию

Компания Google представила новую генеративную нейросеть под названием MusicLM. Это новая модель ИИ, которая умеет создавать качественную музыку по текстовому описанию. Для обучения нейросети использовалось 280 часов музыкальных композиций. В результате она умеет генерировать музыку разных жанров по абстрактному описанию вроде "успокаивающая мелодия скрипки" и тому подобное. Также доступна генерация музыки по картинке и описанию для нее.

MusicLM создает музыку при частоте дискретизации 24 кГц в любом жанре и с любыми инструментами, которые указаны в описании. На странице проекта выложены примеры композиций, сгенерированных по детальному описанию. Это "оптимистичный саундтрек для аркадной игры с гитарными рифами", "медленное регги с басом, барабаном и электрогитарой". Некоторые примеры неожиданно качественные, и в них даже есть вокал. В других много шумов и искаженных звуков. Однако результаты все равно впечатляют. MusicLM еще в разработке, лично испытать возможности ИИ не удастся.

Следует отметить, что уже есть проект генерации музыки на базе нейросети Stable Diffusion с помощью визуальных спектрограмм. И эта модель ИИ доступна для публичного и коммерческого использования.

На фоне успехов популярной нейросети Midjourney для генерации изображений, нельзя исключать, что в будущем нейросети частично заменят людей при создании аудио-визуального контента.

Источник: theverge.com

Похожие новости

Советы от профессионалов и самое распространенные ошибки при защите дипломной работы в Чехии.
Несколько лет назад бургерные начали появляться практически повсеместно.
Исследования показывают, что HR-специалисты читают резюме очень бегло, отводя этому всего лишь от 10 до 20 секунд.
Не знаете где провести Ночь Всех Святых?
Мы креативное агентство предоставляющее услуги Видео контента любого формата и Фото услуги любой сложности в Европе.
Хочешь переехать в Чехию, но не знаешь, с чего начать?
Хочешь переехать в Чехию, но не знаешь, с чего начать?
Что происходит на рынке криптовалют? Почему одним удается на этом заработать, а другие теряют?
Центр трудоустройства инностранцев, открывает набор на позиции: официанты, бармены, девушки hostess.
13 октября состоялся первый в Праге городской квест для ИТ гиков от Veeam Geek Hub.
Крафтовое пиво (от англ. craft brewery — ремесленная пивоварня) — это пиво, произведённое небольшими частными пивоварнями, обычно даже семейными, во время приготовления напитка необходимо придерживаться традиционных рецептов.
Сейчас у каждого второго студента есть автомобиль или хотя бы права - без этого никуда.