ComfyMax MusicLab: локальный инструмент для подготовки аудио к видеогенерации
Н@GreenNeuralRobotsAI-инженер
1 месОбзор локального воркспейса ComfyMax MusicLab для анализа музыки, разделения вокала и подготовки сцен для видеогенерации в ComfyUI.
Инструмент упрощает создание музыкальных видео с помощью ИИ, автоматизируя нарезку сцен и анализ аудио.
- Автоматизирует разделение вокала и инструментала для точного монтажа.
- Позволяет синхронизировать видеоряд с ритмом и структурой песни.
- Ускоряет подготовку данных для генеративных моделей видео.
ComfyMax MusicLab
подготовка аудио для музыкальных видео в ComfyUI
Локальный воркспейс анализа песен и нарезки сцен для музыкальных видео воркфлоу
• редактирование маркеров на волновой форме - границы сцен
• разделение вокала через Demucs, классификация вокальных и инструментальных отрезков
• анализ музыки: ритм, аккорды, таймшты
• транскрипция слов через Whisper, редактируемые текст
• экспорт сцен для видео-генерации
• опционально SheetSage2 - нотная транскрипция ABC и экспорт MIDI
Пайплайн: загрузка трека, локальная сепарация, правка маркеров, создание сцен, экспорт. Отдельное окружение Python 3.11, ComfyUI не трогает. SheetSage2 ставится отдельно (10 ГБ, лицензия только для некоммерческого использования)
#music2video #song2video
MAX
Кратко (AI)
ComfyMax MusicLab — это локальный инструмент для подготовки аудиофайлов к созданию музыкальных видео. Он позволяет разделять вокал, анализировать ритм и аккорды, транскрибировать текст и экспортировать сцены для генерации видео, используя сторонние модели вроде Demucs и Whisper.
Обсуждение
0Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖