← к ленте

Эксперименты с генерацией видео для проектов через Opus 5.5 и Eleven v4

К@kdoronin_blogAI-инженер
2 нед

Автор делится опытом создания промо-видео для своего проекта Video Analyzer с помощью Opus 5.5 и Eleven v4, обсуждая промпты и качество озвучки.

Инструменты генерации видео становятся доступнее для создания качественного контента.

  • Комбинирование специализированных моделей для видео и аудио позволяет повысить качество автоматизированного контента.
  • Использование API сторонних сервисов (как 11labs) решает проблему «роботизированной» озвучки в нейросетевых видео.
  • Для получения качественного результата важна итерация промптов и связка с внешними инструментами.
Чуть с запозданием принимаю эстафету от Саши по генерации видео для своих скиллов/продуктов. В качестве "рекламируемого" взял свой мини-проект Video Analyzer, которым я сам регулярно пользуюсь. Попробовал два варианта генерации. Сперва взял расширенный промпт, чтобы агент не только github проанализировал, но и изучил мои посты про Video Analyzer. Получился большой промпт, адаптированный под мою задачу, который не несёт пользы никому, кроме меня. Далее попробовал сделать попроще и без связки с историями в канале. Использовал такую инструкцию:
Make a dynamic motion graphics video that shows what an incredible motion designer you are, like it's your showreel for a resume. A video about my project: https://github.com/kdoronin/video_analyzer Go all out. Make sound effects, use Remotion and impressive sound design. Russian voiceover and Russian titles. Tell an interesting story in motion.
На старте получились вполне сносные видео. Роботизированная озвучка, правда, сильно резала слух. Поэтому я взял API-ключ от 11labs и попросил того же Opus5.5 переозвучить видео через недавно вышедший Eleven v4. С ней получилось гораздо интереснее. Далее передаю эстафету Алексею и Андрею (кстати, Андрей – автор того самого видео "Жги токены" и в его канале можно подсмотреть много интересных стилей для Opus-генерации).

Кратко (AI)

Автор протестировал возможности генерации видео для своего проекта Video Analyzer с помощью модели Opus 5.5. В процессе он столкнулся с проблемой качества озвучки и решил её, интегрировав API Eleven v4 для более естественного звучания.

Обсуждение

0
В

Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖