видеогенерацияСбросить фильтр ×

Автор клонировал свой голос через SUNO и снял рэп-клип с помощью Claude Fable

Алексей Дюгай (@sontibul) выпустил клип «Нет у бога на тебя особых планов», полностью собранный с помощью нейросетей на основе клона собственного голоса. Идея родилась случайно — во время теста SUNOi на распознавание идентичности голоса он обнаружил, что сервис способен точно синтезировать его голос.

Для этого он записал на телефон свой голос (читал отрывок из «Трайнспоттинга»/«Триагрутрики»), почистил запись в бесплатном Adobe Podcasti и загрузил в SUNO, указав при загрузке, что это именно голос для клонирования. Дальнейшую работу над текстом, рифмовкой и видео-промптами взял на себя Claude Fablei.

5.5версия SUNO, использованная для трека

Полный разбор →

CameraAnything: управление ракурсом видео на базе Wan2.1

Н@GreenNeuralRobotsAI-инженер
2 мес
CameraAnything По входному видео создает видео с другого ракурса, на базе Wan2.1 Контролирует внешние (точка зрения, траектория, мультисценные переходы) и внутренние (фокусное расстояние, разрешение и соотношение сторон) параметры в одном процессе генерации Гитхаб HF #wan21 #cameracontrol #v2v

Vidu представил инструменты для создания музыкальных видео и интерактивных аватаров

Н@GreenNeuralRobotsAI-инженер
2 мес

Как сделали ролик «Дуэль Пушкина и Дантеса в стиле JoJo» на генеративных нейросетях

Автор AI Molodtsa (в другом источнике — AI Molodca/Саша) выпустил короткий видеоролик — экранизацию дуэли Пушкина и Дантеса в стилистике комикса/манги JoJo's Bizarre Adventures, по сценарию товарища Дюрана. Ролик сделан версиями для YouTube, Instagram и TikTok полностью на генеративных нейросетях: от сценария и промптов до видео, музыки и звука.

Автор подробно раскрыл производственный процесс — от разбивки сюжета на 15-секундные сегменты через LLM до сборки в монтаже, включая типичные технические проблемы генеративного видео (деградация качества, «утечка» визуальных референсов) и способы их решения.

15 секунддлина каждого сценарного сегмента
4-8вариаций генерации на сегмент
~100общее число сгенерированных вариаций

Полный разбор →

HOMIE: фреймворк для персонализации видео

Н@GreenNeuralRobotsAI-инженер
3 мес
HOMIE Фреймворк для персонализации видео с фокусом на взаимодействии человека и объектов. Решает проблему неестественных движений и потери идентичности при генерации сцен. • генерация сложных взаимодействий с сохранением естественности движений • точное размещение и удержание логотипов в динамике • стабильная читаемость текста от кадра к кадру • согласованность образа при смене ракурса В основе - MLLM плюс WAN 2.1 Гитхаб HF #wan21 #hoi #personalization #i2v #referencing

Оптимизация Wan 2.2 I2V: использование одного эксперта и FP4

Н@GreenNeuralRobotsAI-инженер
3 мес
Wan 2.2 I2V: One Expert, FP4, on a Single RTX 5090 Как вы помните, видеогенератор WAN 2.2 состоит из двух экспертов: low noise и high noise. Так вот, TheStage AI взяли low noise и дообучили ему лору на high noise. Получилось: 1 модель + лора Ну и сверху еще навалили ускорений: NVFP4 + FP4 attention На сайте два автора подписались - судя по фамилиям русские Первое видео - обычный low noise Второе - low noise с лорой HF ComfyUI #wan22 #optimization #nvfp4 #fp4 #lora

Выпуск экспериментальной LoRA для LTX-Video 2.3 22B

Н@GreenNeuralRobotsAI-инженер
3 мес
LTX-Video 2.3 22B — IC-LoRA: CrossView Prompt v0.9 Лора для смены ракурса видео. v0.9 экспериментальная версия, обучение продолжается #lora #ltx23 #cameracontrol

Qualcomm выпустила MobileWan — генерацию видео нейросетью прямо на смартфоне

Qualcomm представила MobileWan — доработанную (затюненную) версию модели WAN2.2 5Bi, способную генерировать видео непосредственно на смартфонах с процессором Snapdragon, без облачных серверов. Модель создаёт 5-секундные ролики в разрешении 480×832 px при 16 кадрах в секунду, затрачивая на генерацию всего 20 секунд.

По заявлению разработчиков, MobileWan показывает рекордный для мобильных решений результат по бенчмарку VBenchi — 83.79 балла, и, судя по материалам официального сайта проекта, превосходит классическую версию Wan 2.2 5B.

20 секундвремя генерации видео на смартфоне
83.79рекордный балл VBench для мобильных моделей
480×832 px, 16 fpsразрешение и частота кадров видео

Полный разбор →

Эксперимент по созданию 3-минутного музыкального клипа с помощью ИИ

М@cgeventAI-инженер
3 мес

Вышла версия Lucy 2.5: реалтаймовый видеокомпозитинг

М@cgeventAI-инженер
3 мес

MiniMax обновляет платформу Hub для создания мультимедиа

N@v_neuroAI-инженер
3 мес
📱 MiniMax собирает AI-студию MiniMax обновила платформу Hub для производства видео, изображений и аудио. Основной акцент сделан на готовых процессах, которые проводят проект от сценария до работы с камерой и звуком. Что добавили: ✧ ElevenLabs Music v2 ✧ Аудиомодель Seed Audio 1.0 ✧ Сценарии коротких сериалов ✧ Управление траекторией камеры ✧ Поиск по всему проекту ✧ Массовое скачивание файлов 🔗 Подробнее... #MiniMax #MiniMaxHub #HailuoAI

Pika выпустила Director's Suite — ИИ-киностудию для генерации видео

AI-редакция
2 источника · показать все· свернуть
собирается · 2обновлено 3 мес назад

Компания Pika представила Director's Suitei — набор ИИ-агентов, который берёт на себя весь цикл видеопродакшена: от сценария до финального монтажа. Продукт пока в бете, интерфейс утёк в сеть: слева ассеты, внизу таймлайн.

Это часть более широкого тренда — «режиссёрского софта» на основе нейросетей, который уже пробовали делать LTX (LTX Director, LTX Cameraman v2, LTX 2.3 Video Builder для ComfyUI). Но, по мнению канала «Метаверсище и ИИще», Pika не до конца понимает задачу такого инструмента: в наборе нет функций работы с референсами и превизами, упор сделан на монтаж и «кнопку сделать красиво».

Полный разбор →

Промпты для эффекта «замороженной камеры» в Seedance 2.0

М@cgeventAI-инженер
3 мес
Промпты для замороженной камеры в Seedance 2.0 Один подглядел у Магнифика, второй Валера пригнал в коментах "A single continuous handheld handycam shot in slow motion, drifting and weaving organically through a completely frozen party scene, every person suspended mid-movement like a living diorama. The shaky camera circles and floats slowly. Single seamless slow-motion take." Второй промпт конского размера, забирайте тут или тут.\

Wan-Dancer: генератор танца по фото и музыке

Н@GreenNeuralRobotsAI-инженер
3 мес

Развитие сервиса для генерации видео: смена фокуса

Т@timurtaepovмедиа / агрегатор
3 мес

Релиз весов LingBot для ComfyUI

Н@GreenNeuralRobotsAI-инженер
3 мес
LingBot_ComfyUI Веса видеогенератора LingBot Video 1.3B, переупакованые для #ComfyUI В чате пишут что хорошо квантуется ——— LingBot-World-v2 14B causal-fast GGUF генератора миров ——— Обе должны работать на 8ГБ VRAM Спасибо @m_franz #t2v #i2v

Alibaba обновила Wan-Streamer до версии v0.2 — realtime AI-аватар с более высоким разрешением

AI-редакция
2 источника · показать все· свернуть
собирается · 2обновлено 3 мес назад

Wan Team (Alibaba) выпустила версию v0.2 экспериментальной модели Wan-Streameri — системы для общения с AI-аватаром в реальном времени, которая одновременно «видит», «слышит», «думает», говорит и генерирует видео прямо во время стрима.

Основное изменение — рост разрешения с 192×336 до 640×368 при сохранении прежней скорости генерации (25 FPS), а также расширение формата: теперь модель работает не только с крупными планами говорящих лиц, но и со сценами среднего плана, где важна общая картина взаимодействия — мимика, взгляд, жесты рук и контекст остаются различимыми в реальном времени.

640×368новое разрешение видео в v0.2
192×336разрешение предыдущей версии
25 FPSчастота кадров в реальном времени

Полный разбор →

Meta Superintelligence Labs выпустила Muse Image и Muse Video — генераторы изображений и видео с «агентным» рассуждением

Подразделение Meta Superintelligence Labs представило Muse Image — первую собственную модель генерации изображений — и превью видеомодели Muse Video. Это первый релиз лаборатории после переименования Meta GenAI в Meta Superintelligence Labs. Muse Image уже заменяет прежний генератор картинок в Meta AI, доступна в Instagram Stories (пока только в США) и в WhatsApp в ограниченном числе стран; позже появится в Facebook, Messenger и рекламной системе Advantage+ Creative.

Главная особенность моделей — агентный подход: перед генерацией система может искать информацию и референсы в интернете, писать и исполнять Python-код, а затем самостоятельно исправлять собственные ошибки на картинке. По данным Arena на 5 июля, Muse Image заняла второе место по человеческим предпочтениям (после GPT Image 2), Muse Video — топ-3 среди видеомоделей.

$7,99цена тарифа Meta One Plus в месяц
$19,99цена тарифа Meta One Premium в месяц
2-е месторейтинг Muse Image на Arena по человеческим предпочтениям

Полный разбор →

Эволюция инструментов генерации видео: от промптов к режиссерскому контролю

М@cgeventAI-инженер
3 мес

LingBot-Video: MoE-видеогенератор для робототехники

Н@GreenNeuralRobotsAI-инженер
3 мес
LingBot-Video #MoE видеогенератор для воплощённого интеллекта (роботов). Объединяет синтез видео с пониманием физического мира t2v, i2v, ti2v • Создаёт видео в открытом мире, прогнозирует траектории движения • Моделирует роботов, гуманоидов, четвероногих и мобильные платформы • Воспроизводит свойства материалов, освещение и отражения • Имитирует реалистичные движения Есть две версии: компактная Dense (1.3B) и мощная MoE (30B-A3B) Лидирует в RBench Leaderboard по всем показателям Для чего роботам видеогенератор? Например для синтеза обучающих видео и тестирования роботов Гитхаб HF Демо Спасибо @m_franz #t2v #i2v #ti2v

Сравнение Seedance 2.0 и Meta Muse Video

М@cgeventAI-инженер
3 мес
Кстати, вот вам сравнение Seedance 2.0 и Meta Muse Video На мой взгляд очень неплохо. Метачкин жонглер мне больше нравится. Но похоже, что Muse Video - это 10 секунд, и оно пока не вышло. А Сиденский нам обещает в течение 10 дней бахнуть 30 секунд и 4K. @cgevent

AlayaWorld: генератор интерактивных миров в реальном времени

Н@GreenNeuralRobotsAI-инженер
3 мес
AlayaWorld Видеогенератор интерактивных миров в рилтайме Акцент на долгосрочную согласованность мира и мгновенную реакцию на действия - внизу сайта есть демка • 60+ секунд непрерывного видео 720p 24fps • управление персонажем через WASD • каст заклинаний как часть геймплея • смена стиля прямо в генерации • 15B параметров Код / веса ждем #world #text2world #imagw2world #interactive #realtime

Нейрорендер с использованием LTX2.3 и Blender

М@cgeventAI-инженер
3 мес
Нейрорендер для гиков. Вот тут разбирается полный Комфи вокфлоу для нейрорендера с помощью LTX2.3 + Cameraman v2 IC-LoRA, first-frame reference image и Блендора. Ну то есть не просто Блендор+Seedance, а хардовый опенсорс. Поглядите подробнее: https://www.youtube.com/watch?v=KDOy3Naz328 (много ссылок в описании) Этот подход стал настолько популярным, что впору делать отдельный софт для превизов - Блендор все таки сложен в освоении. А тут нужен не перегруженный инструмент именно для черновых референсов, которые пойдут на корм видеогенераторам. @cgevent

Использование vid2vid для генерации видео из 3D-болванок

Н@monkeyinlawAI-инженер
3 мес
Ещё ↓