YuE2 Music skill 1.2.0: инструментальная генерация и каверы по описанию, ABC или записи
У инструмента YuE вышел выпуск YuE2 Music skill 1.2.0, который добавляет генерацию инструментальной музыки и инструментальных каверов по текстовому описанию, ABC-партитуре или эталонной записи. Подробности — в релизе на GitHub. Пакет yue2-music.zip ставится в каталог навыков агента; рекомендуемый агент — GPT-6 Astra. По умолчанию YuE2 сам пишет партитуру и генерирует аудио, агент запускает workflow и проверяет результат. Для кавера вокальные ноты переносятся в инструментальную дорожку с сохранением высоты, начала и длительности; аудиореференсы проходят через SheetSage2. Для инференса нужна совместимая NVIDIA GPU, веса и зависимости ставятся отдельно. Автор сообщает о 51 инструментальном CPU-тесте и 35 регрессионных проверках упаковки.
Что это значит
В нашем справочнике YuE описан как открытый генератор звука от M-A-P с задачей text-generation. Код лежит в открытом доступе под лицензией Apache-2.0, веса — тоже Apache-2.0. Самый большой файл весов занимает 4.6 ГБ, все файлы вместе — 11.6 ГБ. Модель — YuE-s1-7B-anneal-en-cot на Hugging Face, язык кода — Python. Последнее изменение кода в репозитории датировано 2025-06-04, создан репозиторий 2025-01-23. Авторы описывают YuE как открытую модель генерации полноценных песен, похожую на Suno.ai, но с открытым кодом.
Релиз 1.2.0 касается именно навыка yue2-music: в паспорте YuE на нашей странице инструмента этот навык отдельно не описан, как и требования к GPU для инференса, точные ревизии моделей и роль агента GPT-6 Astra. Разработчик не уточняет, меняются ли при этом базовые веса модели или речь только о workflow поверх существующей модели. Требования к видеопамяти в релизе не названы.
Тем, кто уже работает с YuE, обновление добавляет сценарий инструментальной генерации и переноса мелодии в кавер без вокала. Для оценки того, насколько это меняет базовую модель, в паспорте пока недостаточно данных.Как устроен метод. Схема нарисована по этой заметке.