29 января 2023, 14:45 Технологии

Google создала нейросеть MusicLM, которая генерирует музыку по текстовому описанию

Компания Google представила новую генеративную нейросеть под названием MusicLM. Это новая модель ИИ, которая умеет создавать качественную музыку по текстовому описанию. Для обучения нейросети использовалось 280 часов музыкальных композиций. В результате она умеет генерировать музыку разных жанров по абстрактному описанию вроде "успокаивающая мелодия скрипки" и тому подобное. Также доступна генерация музыки по картинке и описанию для нее.

MusicLM создает музыку при частоте дискретизации 24 кГц в любом жанре и с любыми инструментами, которые указаны в описании. На странице проекта выложены примеры композиций, сгенерированных по детальному описанию. Это "оптимистичный саундтрек для аркадной игры с гитарными рифами", "медленное регги с басом, барабаном и электрогитарой". Некоторые примеры неожиданно качественные, и в них даже есть вокал. В других много шумов и искаженных звуков. Однако результаты все равно впечатляют. MusicLM еще в разработке, лично испытать возможности ИИ не удастся.

Следует отметить, что уже есть проект генерации музыки на базе нейросети Stable Diffusion с помощью визуальных спектрограмм. И эта модель ИИ доступна для публичного и коммерческого использования.

На фоне успехов популярной нейросети Midjourney для генерации изображений, нельзя исключать, что в будущем нейросети частично заменят людей при создании аудио-визуального контента.

Источник: theverge.com

Похожие новости

Поэзия Веры Полозковой — это всегда о чувственности, всегда о душе. За долгие годы творчества Полозкова доказала: её стихи - это не просто история, как «она любит, а ее нет».
Концертный тур IC3PEAK по восточной Европе, состоящий из 23 городов, уже начался!
Концертный тур IC3PEAK по восточной Европе, состоящий из 23 городов, уже начался!
«ЛИГА СМЕХА» стала одним из самых популярных телевизионных юмористических шоу. Взрослые и дети вступают в фан-клубы лучших команд чемпионата, цитируют шутки и с нетерпением ждут новых выпусков программ.
Хирург по образованию, юморист по призванию, интеллигентный и остроумный по натуре - Андрей Бебуришвили представит свою сольную программу в Праге уже 13 апреля в 19:00.
Вы уже слышали о квартирниках в Tutto Barbuto Bar & Barbershop?
ИЛЬЯ СОБОЛЕВ со своей сольной программой выступит в Праге
Многие студенты уверены в своих силах и планируют писать бакалаврскую/дипломную работу самостоятельно, что реально сделать, если к этому подойти с умом и учесть самые частые ошибки других студентов.
IC3PEAK — дуэт Насти Креслиной и Николая Костылева – наиболее интересный и яркий пример синтеза современного искусства и поп-музыки.
Отдайся спортивной страсти. Попробуй что-то новое. Не жди. Беги дальше, чем когда-либо. Займись йогой. Войди на боксерский ринг и плыви на волне эмоций. Одержи с друзьями победу в волейбол. Веселись!
Что мы знаем о латвийском DZINTARS?
Нам повезло жить в век информационных технологий. Больше не нужно стоять в длинных очередях, ходить на свидания вслепую, собираться в конференц-залах.