29 января 2023, 14:45 Технологии

Google создала нейросеть MusicLM, которая генерирует музыку по текстовому описанию

Компания Google представила новую генеративную нейросеть под названием MusicLM. Это новая модель ИИ, которая умеет создавать качественную музыку по текстовому описанию. Для обучения нейросети использовалось 280 часов музыкальных композиций. В результате она умеет генерировать музыку разных жанров по абстрактному описанию вроде "успокаивающая мелодия скрипки" и тому подобное. Также доступна генерация музыки по картинке и описанию для нее.

MusicLM создает музыку при частоте дискретизации 24 кГц в любом жанре и с любыми инструментами, которые указаны в описании. На странице проекта выложены примеры композиций, сгенерированных по детальному описанию. Это "оптимистичный саундтрек для аркадной игры с гитарными рифами", "медленное регги с басом, барабаном и электрогитарой". Некоторые примеры неожиданно качественные, и в них даже есть вокал. В других много шумов и искаженных звуков. Однако результаты все равно впечатляют. MusicLM еще в разработке, лично испытать возможности ИИ не удастся.

Следует отметить, что уже есть проект генерации музыки на базе нейросети Stable Diffusion с помощью визуальных спектрограмм. И эта модель ИИ доступна для публичного и коммерческого использования.

На фоне успехов популярной нейросети Midjourney для генерации изображений, нельзя исключать, что в будущем нейросети частично заменят людей при создании аудио-визуального контента.

Источник: theverge.com

Похожие новости

Согласно решению правительства, с 11 мая барбершопы вновь открыты. Пражский Barbershop Farian не стал исключением и уже неделю как принимает своих клиентов.
Чешская Республика постепенно открывает свои консульства для приёма заявлений на долгосрочные визы.
10 функций, которые замедляют работу Mac и как их отключить. Материал подготовлен сервисным центром и магазином OnServis. 
Министерство внутренних дел Чехии представило актуальную подробную информацию о новых правилах продления виз и ВНЖ в период с 18 мая по 16 июля 2020.
Согласно официальной информации министерства внутренних дел Чешской Республики, иностранные граждане с долгосрочными визами не могут по прибытию в Чехию отправляться на карантин сроком на 14 дней.
В Праге постоянно что-то происходит: концерты, выставки, фестивали, марафоны, ярмарки…
В Праге открылся первый магазин с модными масками от ведущих чешских и словацких дизайнеров — Fashion Masks от Czech & Slovak Designers.
Наконец-то после нескольких недель карантина наконец-то можно вернуться к нормальной жизни. Прогуляться на свежем воздухе, заняться спортом, сходить в парикмахерскую, посидеть на открытой террасе ресторана или отправиться за покупками.
Входя в магазин и контактируя с другими людьми, мы подвергаемся определенному риску, поэтому во время шопинга необходимо следовать строгим гигиеническим рекомендациям, установленным в соответствии с государственными правилами работы торговых центров, которые открываются уже в этот понедельник, 11 ма...
Пандемия коронавируса внесла свои коррективы в гастрономическую жизнь Праги.
Образовательная программа «Основы бухгалтерии» предназначена для начинающих и действующих предпринимателей, начинающих и опытных бухгалтеров из постсоветских стран, которые хотят получить или усовершенствовать свои знания в области бухгалтерского учета в Чехии.
Карантин в Чехии был продлен и никто не знает, как и когда наша жизнь вернется в привычное русло. Не смотря на максимальную изоляцию, нам все равно время от времени приходится выходить из дома по делам.