Мета представила ии генератор музыки и различных звуков

Искусственный интеллект медленно проникает в музыкальную индустрию, создавая вирусные песни, воскрешая из мертвых голоса наших любимых певцов и даже претендуя на Грэмми (вроде как). Meta** выпустила новые инструменты искусственного интеллекта, которые сделают использование искусственного интеллекта для создания музыки еще проще.

Во вторник Meta** представила AudioCraft, набор моделей генеративного искусственного интеллекта, которые, по словам Meta**, могут создавать "высококачественную и реалистичную" музыку из текста.

Audiocraft состоит из трех генеративных моделей искусственного интеллекта Meta**: MusicGen, AudioGen и EnCodec. MusicGen и AudioGen генерируют звук из текста, причем один генерирует музыку, а второй - специфические аудио и звуковые эффекты.

Вы можете посетить MusicGen на HuggingFace и поиграть с демо-версией. В подсказке вы можете описать любой тип музыки, которую вы хотели бы услышать, из любой эпохи. Например, Meta** делится примером: "Зажигательная поп-песня 80-х с тяжелыми барабанами и синтезаторными пэдами на заднем плане".

EnCodec - это аудиокодек, состоящий из нейронных сетей, которые сжимают звук и восстанавливают входной сигнал. В рамках анонса Meta** выпустила самую новую версию Encodec, которая позволяет создавать музыку более высокого качества с меньшим количеством артефактов, согласно релизу.

Meta** также выпустила предварительно обученные модели AudioGen, которые предоставляют пользователям доступ к созданию звуков окружающей среды и звуковых эффектов, таких как лай собаки или скрип пола.

В пресс-релизе Meta** говорится, что AudioCraft потенциально может стать новым типом стандартного инструмента, каким когда-то были синтезаторы.

"Мы думаем, что с еще большим количеством элементов управления MusicGen может превратиться в инструмент нового типа - совсем как синтезаторы, когда они только появились", - сказал Мета.

Это не первая генеративная модель искусственного интеллекта такого рода. В январе Google выпустила MusicLM - свою собственную модель, которая может преобразовывать текст в музыку. Недавнее исследование показало, что Google также использует искусственный интеллект для воссоздания музыки по активности человеческого мозга.