Обзор инструментов и обновлений для локальной генерации музыки на YuE2
Н@GreenNeuralRobotsAI-инженер
2 недПодборка новых инструментов для работы с YuE2: Plenio 0.3, Gokuk, Yeufonic, ACE-Step 1.0 и обновления для локальной генерации музыки.
Локальные инструменты позволяют создавать полноценные музыкальные треки без облачных подписок и цензуры.
- Появление специализированных интерфейсов (Plenio, Gokuk) упрощает работу с профессиональными параметрами генерации.
- Оптимизация моделей (int8) и исправления в коде позволяют запускать генерацию на потребительских видеокартах.
- Возможность локального обучения LoRA дает пользователям контроль над стилистикой и качеством звучания.
#Yue2 / #minimaxMusic / #acestep15
github.com/jplenio/Plenio-Music-Production-System - Plenio 0.3: описание песни → локальная LLM пишет, YuE2/Minimax Music 3 исполняет, Plenio сводит/мастерит. Все в #ComfyUI, без облака. Редактор партитуры (пианолла, нотация, ABC), стемы с фейдерами и эффектами, графический EQ с матчингом референса, мастеринг до −14 LUFS. Шесть шаблонов, режим ревью. Refine и Stems пока экспериментальные
github.com/Garionhk/GoKuk - Gokuk: портативное Windows-приложение для полных песен на YuE2 без ComfyUI. Чипы стиля, кавер с SheetSage2, редактор партитуры до генерации, библиотека. Windows 10/11, NVIDIA 12GB+, ~25GB диска. Лицензии CC BY-NC — только некоммерческое
github.com/yeufonic/yeufonic - Yeufonic: веб-приложение вокруг ComfyUI/YuE2 без проводов, Docker или Windows-инсталлятор, локальный трейн LoRA
github.com/HerkulesTerminator/comfyui-music-generator/tree/main - ACE-Step 1.0 + YuE2 - эйсстеп хорош креативно, прогоняем его ноты через YuE2 = хороший звук #workflow
#LoRA
huggingface.co/pduncan/YuE2_Deathmetalv1_lora -дэт-металл
Обновления
github.com/pytraveler/YuE2-ComfyUI/releases/tag/v0.12.0 - YuE2-ComfyUI 0.12.0: точнее распознавание слов (поле language — русский больше не переводится на английский; second_hearing: Whisper слушает второй раз, ошибки 9% вместо 15%). RTX 20xx/GTX 16: последняя стадия в FP16 — длинные песни доходят до конца. Фикс падения при отмене в первую секунду
huggingface.co/deAPI-ai/minimax-music3-11b-int8 - MiniMax Music 3 ужат до ~12Gb (int8)
#musicediting
Кратко (AI)
В посте представлен обзор актуальных инструментов для локальной генерации музыки на базе модели YuE2. Среди новинок — система Plenio 0.3 для полного цикла продакшена, приложение Gokuk для Windows, веб-интерфейс Yeufonic и интеграция ACE-Step 1.0. Также отмечены технические обновления, включая улучшенное распознавание русского языка в YuE2-ComfyUI и квантованную версию MiniMax Music 3.
Обсуждение
0Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖