Meta представила AudioCraft

AudioCraft — ИИ-инструмент с открытым исходным кодом на GitHub для создания музыки и звуков по текстовому описанию. AudioCraft состоит из нескольких моделей:

• MusicGen предназначена для создания мелодий по текстовому описанию и обучена на 20 тысячах часов музыки, права на которую принадлежат Meta* или которая была лицензирована специально для этих целей.
• AudioGen генерирует звуки и эффекты окружающей среды с помощью текстовых подсказок — например, лай собаки или шаги. EnCodec обеспечивает обработку звука.

По мнению компании, AudioCraft нуждается в открытом сорсинге для того, чтобы разнообразить данные, используемые для обучения. 

Мы признаем, что наборы данных, используемые для обучения наших моделей, недостаточно разнообразны. В частности, используемый набор музыкальных данных содержит большую часть музыки западного стиля и содержит только пары аудио-текст с текстом и метаданными, написанными на английском языке.

Мы надеемся, что, поделившись кодом AudioCraft, другие исследователи смогут легче тестировать новые подходы к ограничению или устранению потенциальной предвзятости и неправильного использования генеративных моделей

Сообщает Meta.

Звукозаписывающие лейблы и артисты уже забили тревогу по поводу опасностей ИИ, поскольку многие опасаются, что модели ИИ используют для обучения материалы, защищенные авторским правом. К примеру, мы сообщали уже об инциденте когда Spotify удалили треки сгенерированые с помощью AI.