DMAD: метод дистилляции для ускорения генерации изображений и видео

ByteDance представила метод дистилляции DMAD, позволяющий сократить количество шагов генерации до 4 при сохранении высокого качества.

Новый метод ускоряет создание нейросетевого контента в 12 раз, делая генерацию видео и картинок практически мгновенной.

Сокращение времени генерации с 50 до 4 шагов значительно снижает вычислительные затраты.
Технология применима к популярным архитектурам, таким как SDXL и Wan2.1.
Повышение скорости работы нейросетей делает их использование более доступным и эффективным для реальных задач.

DMAD Ускорение генерации картинок и видео Метод дистилляции от ByteDance: студент-модель учится выдавать результат за 4 шага вместо 50, почти не теряя в качестве. • Картинки и видео за 4 шага • Видео с аудио на MiniMax-H3-33B • Работает на SDXL, Wan2.1, EDM • FID 1.04 на ImageNet-64 за один проход В слепых тестах люди чаще предпочитают результат, чем у DMD2 и rCM Гитхаб HF Демо Спасибо @m_franz #optimization #minimaxh3 MAX

Кратко (AI)

ByteDance представила метод дистилляции DMAD, который позволяет моделям генерировать изображения и видео всего за 4 шага вместо стандартных 50. Технология поддерживает работу с моделями SDXL, Wan2.1 и EDM, показывая результаты, которые в слепых тестах превосходят аналоги вроде DMD2 и rCM.

DMAD: метод дистилляции для ускорения генерации изображений и видео

Кратко (AI)

Обсуждение