wan21Сбросить фильтр ×

ID-V2V: инструмент для изменения освещения и сцены в видео

Н@GreenNeuralRobotsAI-инженер
4 нед
ID-V2V переделывает сцену и свет в видео, личность и действия не трогает, На вход нужно собственно исходное видео и измененный первый кадр Есть версия с контролем глубины сцены на базе Wan2.1 (T5, VAE, CLIP), SAM3, DiT + VACE Для глубины - DAViD и DepthAnything-V2 Гитхаб HF #relighting #wan21 #videoediting #referencing #sylize

CameraAnything: управление ракурсом видео на базе Wan2.1

Н@GreenNeuralRobotsAI-инженер
4 нед
CameraAnything По входному видео создает видео с другого ракурса, на базе Wan2.1 Контролирует внешние (точка зрения, траектория, мультисценные переходы) и внутренние (фокусное расстояние, разрешение и соотношение сторон) параметры в одном процессе генерации Гитхаб HF #wan21 #cameracontrol #v2v

HOMIE: фреймворк для персонализации видео

Н@GreenNeuralRobotsAI-инженер
1 мес
HOMIE Фреймворк для персонализации видео с фокусом на взаимодействии человека и объектов. Решает проблему неестественных движений и потери идентичности при генерации сцен. • генерация сложных взаимодействий с сохранением естественности движений • точное размещение и удержание логотипов в динамике • стабильная читаемость текста от кадра к кадру • согласованность образа при смене ракурса В основе - MLLM плюс WAN 2.1 Гитхаб HF #wan21 #hoi #personalization #i2v #referencing

ProxyPose: трекинг 6-DoF позы на базе Wan2.1-T2V-14B

Н@GreenNeuralRobotsAI-инженер
1 мес

OrbitQuant: метод калибровки без данных для квантования диффузионных моделей

Н@GreenNeuralRobotsAI-инженер
1 мес
OrbitQuant метод калибровки без данных (calibration‑free) для посттренировочной квантизации (PTQ) диффузионных генераторов изображений и видео • новая #SOTA на FLUX.1, Wan 2.1 и CogVideoX при W4A4 (4 бита для весов, 4 бита для активаций) • рабочие изображения на W2A4, где старые методы ломаются Код / веса не выложили пока #optimization #t2i #t2v #flux #wan21 #zimage

LiveEdit: потоковое редактирование видео на базе Wan2.1

Н@GreenNeuralRobotsAI-инженер
1 мес
LiveEdit Редактирование потокового видео в рилтайме на базе #wan21 • 12.66 FPS в реальном времени • трехэтапная дистилляция для переноса способностей модели • причинно-следственная покадровая обработка • сохранение фона и неизмененных регионов • AR-ориентированный кэш масок для экономии вычислений Дистилляция до 4 шагов диффузии. Гитхаб HF #realtime #videoediting #streaming

Это всё на сейчас.