Алексей Дюгай (@sontibul) выпустил клип «Нет у бога на тебя особых планов», полностью собранный с помощью нейросетей на основе клона собственного голоса. Идея родилась случайно — во время теста SUNOi на распознавание идентичности голоса он обнаружил, что сервис способен точно синтезировать его голос.

Для этого он записал на телефон свой голос (читал отрывок из «Трайнспоттинга»/«Триагрутрики»), почистил запись в бесплатном Adobe Podcasti и загрузил в SUNO, указав при загрузке, что это именно голос для клонирования. Дальнейшую работу над текстом, рифмовкой и видео-промптами взял на себя Claude Fablei.

• При загрузке аудио в SUNO теперь можно указать тип загружаемого материала — автор выбрал опцию «голос» для клонирования
• Claude Fable, по словам автора, несмотря на дороговизну использования, дал качество текста «другого уровня» по сравнению с альтернативами
• Было написано около десяти промптов для музыки, а текст песни зарифмован с помощью Claude
• SUNO 5.5 расставляет акценты в музыке под особенности голоса и учитывает разметку lyrics — по словам автора, это не просто минусовка, а персонализированная музыка под конкретный ритм
• Claude Fable в том же чате сразу начал писать сцены и промпты для генерации видео, привязанные к тексту песни
• Пример первого видео-промпта задавал стиль: 100% фотореалистичное игровое кино, съёмка на камеру ARRI Alexa с анаморфотными объективами, текстура кожи с порами, зерно 35mm плёнки, светотень в оранжево-циановых тонах, точная синхронизация губ рэпера с аудио