Все об искусственном интеллекте
Meta, которой принадлежат Instagram, Threads, Facebook и WhatsApp, выпустила ИИ (искусственный интеллект) с открытым исходным кодом под названием AudioCraft. Это позволяет пользователям создавать музыку и звуки с помощью генеративного ИИ.
Для тех, кто торопится:
- Meta выпустила ИИ с открытым исходным кодом под названием AudioCraft;
- Этот инструмент позволяет пользователям создавать музыку и звуки с помощью генеративного ИИ;
- AudioCraft состоит из трех моделей ИИ, каждая из которых предназначена для разных областей генерации звука;
- Компания считает, что ее новая модель может открыть новую волну музыки так же, как это делают синтезаторы;
- По словам компании, AudioCraft должен иметь открытый исходный код, чтобы разнообразить данные, используемые для его обучения.
AudioCraft состоит из трех моделей ИИ, каждая из которых предназначена для разных областей генерации звука.
Читать далее:
Мета-ИИ, который «делает музыку»
(Изображение: раскрытие/цель)
MusicGen использует тексты в качестве входных данных для создания музыки. Эта модель была обучена на 20 000 часов музыки, принадлежащей Meta или лицензированной специально для этой цели.
AudioGen создает звук из письменных инструкций, имитируя лай собак или шаги, и был обучен общедоступным звуковым эффектам.
Улучшенная версия декодера Meta EnCodec позволяет пользователям создавать «более чистые» звуки — когда вы слишком сильно манипулируете звуком, он становится «грязным».
Новый синтезатор?
(Изображение: раскрытие/цель)
На данный момент AudioCraft выглядит как что-то, что можно использовать для лифтовой музыки или обычных песен, которые можно использовать для создания атмосферы, а не для того, чтобы стать следующей популярной поп-музыкой.
Тем не менее, Meta считает, что ее новая модель может открыть новую волну музыки так же, как синтезаторы изменили музыку, когда они впервые стали популярными.
Meta осознала сложность создания моделей ИИ, способных создавать музыку, поскольку аудио часто содержит миллионы точек, в которых модель выполняет действие, по сравнению с текстовыми моделями, написанными, как Llama 2, которые содержат только тысячи.
Компания заявляет, что исходный код AudioCraft должен быть открытым, чтобы разнообразить данные, используемые для его обучения.
Мы понимаем, что наборы данных, используемые для обучения наших моделей, не отличаются разнообразием. В частности, используемый музыкальный набор данных содержит большую часть западной музыки и содержит только пары аудио-текст с английским текстом и метаданными. Мы надеемся, что, делясь кодом AudioCraft, другим исследователям будет легче тестировать новые подходы к ограничению или устранению предубеждений и неправильного использования генеративных моделей.
Мета
Музыка и ИИ
(Изображение: Педро Спадони/Digital Look)
Meta — это новейшее сочетание музыки и искусственного интеллекта. Google создал MusicLM, большую языковую модель, доступную только исследователям, которая генерирует минуты звуков на основе текстовых инструкций.
Недавно сгенерированная искусственным интеллектом песня с вокальным сходством с Дрейком и The Weeknd стала вирусной, прежде чем была удалена.
Совсем недавно некоторые музыканты — например, Граймс — призвали людей использовать свои голоса в музыке, созданной искусственным интеллектом.
Кроме того, звукозаписывающие компании и артисты предупреждают об опасностях ИИ, поскольку многие опасаются, что модели ИИ используют материалы, защищенные авторским правом, для обучения, и исторически сложилось так, что они часто вызывали споры.
Смотрели новые видео на YouTube от Olhar Digital? Подписывайтесь на канал!