Видео со звуком: нейросети и промпты

Опишите звук как часть сцены: что его создаёт, когда он возникает и какой голос или фон должен быть слышен отчётливее всего.

Какие модели SeaDance создают звук?

Все семь видеомоделей, сейчас доступных для покупки на SeaDance, создают результат с включённым звуком. В семействах Seedance и MiniMax H3 генерация аудио фиксирована. Kling 3.0 в действующем процессе SeaDance также работает с включённым звуком. Выбирайте модель по доступным параметрам изображения и творческой задаче; в этом процессе звук не загружается отдельным файлом.

Согласно обзору Seedance 2.0 от ByteDance, модель совместно генерирует аудио и видео. В анонсе Kling 3.0 от Kuaishou заявлена встроенная генерация аудио. Это общий контекст для составления аудиовизуальных промптов. Реальный выбор моделей, параметры результата и цены SeaDance приведены ниже независимо от более широких возможностей, описанных разработчиками.

ВидеомодельРазрешениеЗвук в результате5 секунд10 секунд15 секунд
Seedance 2.0 Mini480pВключён4 кредита / $0,807 кредитов / $1,4011 кредитов / $2,21
Seedance 2.0480pВключён7 кредитов / $1,4014 кредитов / $2,8121 кредит / $4,21
Seedance 2.0 Fast480pВключён6 кредитов / $1,2012 кредитов / $2,4118 кредитов / $3,61
Seedance 2.5480pВключён11 кредитов / $2,2121 кредит / $4,2131 кредит / $6,22
Kling 3.0720pВключён13 кредитов / $2,6126 кредитов / $5,2238 кредитов / $7,63
MiniMax H3768PВключён9 кредитов / $1,8117 кредитов / $3,4125 кредитов / $5,02
MiniMax H3 Max768PВключён9 кредитов / $1,8117 кредитов / $3,4125 кредитов / $5,02

Оценки в долларах рассчитаны по приобретённым кредитам месячного плана Basic: $29,90 за 149 кредитов, около $0,2007 за кредит. Это не отдельные цены для оплаты. Начальный баланс нового аккаунта — 0 кредитов. Проверьте данные на странице тарифов перед отправкой; каждый приведённый ниже расчёт относится к одному результату.

Все видео в таблице имеют соотношение сторон 16:9; каждый запрос создаёт один результат. В этих вариантах моделей другое разрешение нельзя выбрать как отдельное улучшение. Начните с доступного режима Текст в видео или Изображение в видео и согласуйте описание звука с тем, что происходит в кадре.

Опишите звуковой фон как физическую часть обстановки

Укажите правдоподобный источник вместо просьбы об «иммерсивном аудио». Для пустой теплицы это могут быть дождь по крыше, негромкий вентилятор и шаги по проходу. Уточните, какие звуки близко, а какие вдали. Так вы зададите звуковую перспективу, не заставляя камеру показывать каждый источник.

Авторский пример звукового фона: «Садовница медленно идёт по теплице. Мягкий дождь стучит по стеклянной крыше; близкие шаги слышны отчётливо, а вдали тихо гудит вентилятор. Сохраняйте спокойную атмосферу, без речи и музыки». Это подходящая основа для тихой наблюдательной сцены. Просьба исключить речь — инструкция, а не гарантированное отключение голоса.

Привяжите звуковые эффекты к видимым событиям

Для действия с товаром опишите событие, вызывающее звук. Крышка щёлкает при закрытии, чашка касается блюдца, бумага шуршит при складывании. Не добавляйте громкий эффект к каждому движению камеры. Перемещение камеры и действие предмета — разные вещи; лишний звуковой акцент отвлекает от события, которое зритель должен понять.

Авторский пример эффектов: «Неподвижный план: керамическую чашку осторожно ставят на деревянный стол. В момент касания основания о поверхность слышен мягкий стук, затем остаётся тихий фон комнаты. Без резкого удара и голоса». Проверьте, связан ли эффект с видимым касанием. Если он звучит не вовремя, в следующем промпте упростите действие и уберите конкурирующие звуки.

Опишите роль музыки

Полезное музыкальное задание указывает инструменты, настроение и заметность музыки. Для спокойной сцены с товаром попросите ненавязчивый инструментальный фон под действием. Для энергичной сцены задайте более чёткий пульс, не требуя сложной последовательности точных музыкальных смен. Используйте оригинальные музыкальные описания и материалы, на которые у вас есть права; не просите модель воспроизвести коммерческую запись.

Авторский пример музыки: «Термокружка стоит рядом с блокнотом в утреннем свете из окна. Тихие щипковые струнные создают тёплый инструментальный фон без вокала; звук постановки кружки должен быть хорошо слышен». Музыка поддерживает сцену, а не вытесняет её. Если результат перегружен, уберите инструмент или оставьте только звуки окружения, прежде чем усложнять изображение.

Сократите реплику и укажите говорящего

Заключите точную реплику в кавычки, назовите говорящего и опишите манеру речи. Для первой проверки подходит один видимый персонаж: так понятно, кому принадлежат слова. Реплика должна естественно укладываться в выбранную длительность, оставляя время на видимую реакцию. Точность произношения и синхронизацию всё равно нужно проверять на слух и по изображению.

Авторский пример диалога: «Продавщица стоит лицом к камере возле полки с мисками ручной работы. Спокойным голосом на английском она говорит: „Эта миска готова для вашего стола“. Тихий фон магазина остаётся позади голоса; без фонового пения». Для 5 секунд может подойти ещё более короткая реплика. При 10 или 15 секундах оставьте паузы, а не заполняйте речью каждый момент.

Ограничения аудиоввода и результата без звука

SeaDance не поддерживает загрузку аудиофайла для управления генерацией. Опишите окружение, музыку и речь текстом. Просьба о звуке не делает неподдерживаемый файл допустимым вводом, а демонстрация дополнительных входных данных разработчиком не означает их доступности здесь. Используйте только загрузку изображений, предусмотренную выбранным режимом.

В калькуляторе Kling есть более низкие расценки без звука; ниже они показаны для прозрачности. В качестве действующего варианта генерации на SeaDance они недоступны: звук остаётся включённым. Эту скидку нельзя активировать словом «беззвучно» в промпте. В Seedance и MiniMax H3 аудио фиксировано, поэтому для этих семейств нет соответствующего выбора цены без звука.

Kling 3.0, 720pДействующая стоимость со звукомРасчёт без звука: недоступен на SeaDance
5 секунд13 кредитов / $2,619 кредитов / $1,81
10 секунд26 кредитов / $5,2217 кредитов / $3,41
15 секунд38 кредитов / $7,6326 кредитов / $5,22

Проверяйте изображение и звук вместе

Прислушайтесь к нежелательной речи, отвлекающей музыке, резким эффектам и неразборчивым словам. Проверьте, совпадают ли шаги, звуки касания и движения губ с действием. Исправляйте конкретный недостаток: упростите смену говорящих, сократите наложение эффектов или подчините музыку голосу. Даже успешно доставленный файл может потребовать творческой доработки; генерация звука не гарантирует исполнение в точности по замыслу.

Если произнесённая реплика отличается от заданной

Авторы сцен с речью часто жалуются, что слова в результате отличаются от написанных или движение рта расходится с речью. На SeaDance звук генерируется вместе с изображением, поэтому нельзя закрепить заранее записанную голосовую дорожку или настроить движения губ внутри генератора.

Делайте реплики короткими, заключайте точные слова в кавычки, оставляйте одного говорящего в кадре и избегайте музыки или эффектов под речью. Перед использованием ролика проверьте слова и движения рта. Если важна точная озвучка, например утверждение о товаре или имя, запланируйте собственную запись закадрового голоса при монтаже, вместо того чтобы полагаться на сгенерированный диалог.

Частые вопросы

Можно ли отключить звук Kling ради более дешёвого результата?

Нет. Калькулятор содержит расчёт без звука, но действующий процесс SeaDance включает звук. Текущая стоимость учитывает аудио.

Можно ли загрузить свою звуковую дорожку?

Нет. Сейчас SeaDance принимает поддерживаемые изображения для режимов на основе изображений, но не звуковые файлы. Опишите нужный звук в текстовом промпте.

Гарантируют ли слова «без музыки» тишину?

Нет. Они передают пожелание к звуковой дорожке, но не отключают генерацию аудио. Если музыка не нужна, попросите сдержанный звуковой фон, затем прослушайте полученный результат.

Какая модель поддерживает речь?

Доступные модели генерируют аудио, поэтому речь можно описать в промпте. Проверьте фактические слова и движения рта; список моделей не гарантирует идеальных диалогов или произношения.

Источники

ByteDance: Seedance 2.0 · Kuaishou: Kling 3.0 native audio

Статьи по теме

Промпты для движения камеры · Сравнение Kling 3.0 и MiniMax H3 · Почему генерация завершается ошибкой