CPU3DИИ-инструменты для 3D, видео и звука

YuE2 Music skill 1.2.0: инструментальная генерация и каверы по описанию, ABC или записи

У инструмента YuE вышел выпуск YuE2 Music skill 1.2.0, который добавляет генерацию инструментальной музыки и инструментальных каверов по текстовому описанию, ABC-партитуре или эталонной записи. Подробности — в релизе на GitHub. Пакет yue2-music.zip ставится в каталог навыков агента; рекомендуемый агент — GPT-6 Astra. По умолчанию YuE2 сам пишет партитуру и генерирует аудио, агент запускает workflow и проверяет результат. Для кавера вокальные ноты переносятся в инструментальную дорожку с сохранением высоты, начала и длительности; аудиореференсы проходят через SheetSage2. Для инференса нужна совместимая NVIDIA GPU, веса и зависимости ставятся отдельно. Автор сообщает о 51 инструментальном CPU-тесте и 35 регрессионных проверках упаковки.

Что это значит

В нашем справочнике YuE описан как открытый генератор звука от M-A-P с задачей text-generation. Код лежит в открытом доступе под лицензией Apache-2.0, веса — тоже Apache-2.0. Самый большой файл весов занимает 4.6 ГБ, все файлы вместе — 11.6 ГБ. Модель — YuE-s1-7B-anneal-en-cot на Hugging Face, язык кода — Python. Последнее изменение кода в репозитории датировано 2025-06-04, создан репозиторий 2025-01-23. Авторы описывают YuE как открытую модель генерации полноценных песен, похожую на Suno.ai, но с открытым кодом. Релиз 1.2.0 касается именно навыка yue2-music: в паспорте YuE на нашей странице инструмента этот навык отдельно не описан, как и требования к GPU для инференса, точные ревизии моделей и роль агента GPT-6 Astra. Разработчик не уточняет, меняются ли при этом базовые веса модели или речь только о workflow поверх существующей модели. Требования к видеопамяти в релизе не названы. Тем, кто уже работает с YuE, обновление добавляет сценарий инструментальной генерации и переноса мелодии в кавер без вокала. Для оценки того, насколько это меняет базовую модель, в паспорте пока недостаточно данных.
YuE2 Music skill 1.2.0 — инструментальная генерация и каверы Вход Три источника Текст ABC Запись описание, партитура, эталонное аудио GPT-6 Astra агент-оркестратор запускает workflow, проверяет результат YuE2 Music skill yue2-music.zip пишет партитуру, генерирует аудио SheetSage2 обработка аудиореференсов Выход инструментальный кавер без вокала Базовая модель: YuE-s1-7B-anneal-en-cot Веса: 11.6 ГБ всего, 4.6 ГБ — самый большой файл · Лицензия Apache-2.0 · Python Требуется NVIDIA GPU · 51 CPU-тест · 35 регрессионных проверок
Как устроен метод. Схема нарисована по этой заметке.

Смотрите также