Дубляж заменяет исходную аудиодорожку файла новой дорожкой на другом языке, сохраняя особенности голосов и эмоциональную окраску речи дикторов. Речь каждого диктора дублируется голосом, выбранным из библиотеки голосов, или клонированным голосом.
Для дубляжа необходимо правильно назначить дикторов (см. ). Если для пропуска автоматической транскрипции аудио используются импортированные файлы субтитров, перед переходом к дубляжу убедитесь, что всем дикторам назначены сегменты.
Когда два диктора говорят одновременно, для каждого из них нужен отдельный сегмент, охватывающий период одновременной речи. Если сегмент назначен только одному диктору, дубляж этого сегмента будет создан только его голосом, даже если в сегменте есть реплики другого диктора.
Примеры использования
-
Медиакомпания хочет распространить документальный фильм, изначально снятый на английском языке, в Испании и Японии. ИИ платформы распознаёт каждого диктора, транскрибирует и переводит диалог, а затем создаёт новые аудиодорожки на испанском и японском языках. Сгенерированные голоса сохраняют особенности голосов дикторов, благодаря чему новая аудитория может воспринимать фильм естественно.
Создать дубляж
Примечание
Дубляж можно добавить только для языков, на которые уже выполнен перевод. Если нет доступных языков, сначала добавьте перевод (см. ).
Чтобы создать дубляж для файла, выполните следующие действия:
-
В редакторе откройте этап «Дубляж» и нажмите «Дублировать». Этот этап доступен только после завершения этапа «Перевод».
Если для диктора не назначен голос на языке дубляжа, отображается сообщение
«Требуется назначение голоса». Сначала назначьте голоса в разделе .Откроется окно .
-
В разделе выберите нужные языки, на которые выполнен перевод.
Примечание
Если выбран региональный вариант языка (например, французский (Канада) или португальский (Бразилия)), система автоматически использует для дубляжа соответствующий базовый язык.
Выбор регионального языка сохраняется в проекте и метаданных.
Если для выбранного языка уже есть дубляж, при продолжении существующий дубляж будет перезаписан. Это действие нельзя отменить.
-
При необходимости включите параметр и выберите для каждого языка существующие варианты произношения (см. ).
-
При необходимости для аудиозаписей выберите параметр , чтобы сохранить естественную скорость речи. Длительность сегментов увеличивается, чтобы вместить всю речь, поэтому дубляж может быть длиннее оригинала.
Загруженный файл сохраняется в качестве субтитров для дубляжа. Существующие переведенные субтитры не изменяются. Для языков с загруженными субтитрами дубляж не выполняется.
-
При необходимости загрузите файл .SRT или .VTT для каждого выбранного языка в разделе загрузки субтитров, чтобы использовать существующие субтитры для дубляжа.
-
Нажмите «Начать дубляж».
Окно закроется. В раскрывающемся списке языков на этапе отображается статус каждого языка.
Примечание
Если дубляж для языка был создан с помощью другого движка, а текущий движок его не поддерживает, в окне этот язык будет помечен как неподдерживаемый.
После завершения дубляжа используйте следующие элементы управления на этапе :
-
«Обновить дубляж с учётом изменений»: Обновляет дубляж с учётом изменений, внесённых в текст, настройки диктора или настройки сегмента. Изменённые сегменты помечаются как
«Изменено — требуется повторный дубляж», а счётчик показывает, сколько сегментов ожидает повторного дубляжа. -
«Повторно создать дубляж этого сегмента»: Повторно создаёт дубляж одного сегмента без повторного дубляжа всей записи.
-
«Повторный дубляж»: Повторно создаёт дубляж всех сегментов на выбранном языке. Существующее дублированное аудио заменяется и не подлежит восстановлению.
-
«Синхронизировать дубляж»: Появляется, когда переведенные субтитры отличаются от дубляжа. Нажмите на него, чтобы синхронизировать дубляж с переводом.
-
«Загрузить субтитры»: Загружает файл .SRT или .VTT в качестве субтитров для дубляжа выбранного языка, как на шаге 5.
-
«Управление голосами»: Выбирает голос для каждого диктора.
Дикторы в дубляже
Каждый сегмент дублируется голосом, назначенным диктору этого сегмента. Для каждого диктора требуется голос для языка дубляжа. Сегменты, у которых нет диктора, не дублируются.
Если у диктора нет голоса, отображается сообщение «Одному или нескольким дикторам не назначен подходящий голос для этого языка» с указанием открыть раздел «Управление голосами» и назначить голоса перед дубляжом.
Сегменты, назначенные разным дикторам и перекрывающиеся по времени, дублируются так, что их звуковые дорожки накладываются друг на друга. Диалог, не зафиксированный в сегменте, не появляется в дубляже. Чтобы включить диалог второго диктора, добавьте отдельный сегмент для этого диктора.
Управление голосами
Чтобы выбрать голос для диктора, выполните следующие действия:
-
На этапе нажмите «Управление голосами».
-
Выберите диктора в списке . При необходимости выберите язык.
-
Выберите голос на одной из вкладок:
-
: Голоса, предложенные для этого языка.
-
: Все доступные голоса. Используйте поле поиска или фильтры , и , чтобы сузить список.
-
: Клонированные, похожие и созданные голоса организации.
-
-
При желании нажмите значок , чтобы прослушать голос. Если не введён пользовательский текст, воспроизводится образец голоса. Чтобы услышать, как голос произносит определенный текст, введите до 200 символов в поле предварительного просмотра, например слово с пользовательским произношением. Чтобы ввести текст в фонетической транскрипции, выберите «Читать как IPA (фонетически)».
-
При желании нажмите значок , чтобы добавить голос в избранное: тогда при последующем выборе он будет отображаться первым.
-
Нажмите Сохранить.
Примечание
Доступные вкладки зависят от движка дубляжа. Вкладка не отображается для организаций, использующих собственный ключ API ElevenLabs.
Параметр применяется только к пользовательскому тексту для предварительного прослушивания. IPA не поддерживается в ElevenLabs v2: текст произносится в соответствии с его написанием. В Azure TTS результат зависит от локали голоса и может звучать неточно.
Движок дубляжа
Движок дубляжа определяет доступные голоса и элементы управления в редакторе. Выберите движок в разделе или в настройках отдельного проекта.
Доступные движки:
-
ElevenLabs v2
-
ElevenLabs v3
-
ElevenLabs v4
-
ElevenLabs v4 Turbo
-
Azure TTS
-
Gemini 2.5 Flash TTS
|
Управление |
Доступность |
|---|---|
|
Элементы управления аудио (теги эмоций) |
ElevenLabs v3, v4 и v4 Turbo |
|
Громкость сегмента, стабильность и сходство |
Движки ElevenLabs |
|
Клонирование голоса и подбор похожих голосов в редакторе |
Провайдер дубляжа ElevenLabs |
Чтобы использовать голоса и квоту собственной учетной записи ElevenLabs организации, добавьте ключ API ElevenLabs в качестве учетных данных в разделе .
Ключу необходимы как минимум следующие разрешения: Text to Speech (Access) и Voices (Read and Write). Для каждой организации можно добавить только одни учетные данные ElevenLabs.
Элементы управления аудио помогают сделать дубляж более выразительным и точным: они позволяют отмечать важные нюансы голоса, передающие паралингвистическую информацию. Щелкните правой кнопкой мыши по сегменту и выберите , чтобы добавить один или несколько доступных параметров в нужном месте.
Примечание
Элементы управления аудио доступны только с движками ElevenLabs v3 или v4. Элементы управления аудио могут работать не со всеми языками или моделями голоса. Рекомендуется провести тестирование с выбранным голосом, чтобы подтвердить совместимость.
Корректировка аудио или повторный дубляж после тестирования не расходуют (дополнительные минуты).
Если проект включает несколько дикторов, настройки дубляжа можно изменить для каждой дорожки диктора и для отдельных сегментов на этапе .
-
Настройки диктора
Нажмите значок шестеренки () рядом с именем диктора на осциллограмме, чтобы открыть его настройки. Настройки применяются ко всем сегментам этого диктора.
-
Управление сегментом
Выберите сегмент на временной шкале, чтобы открыть панель и при необходимости изменить настройки дубляжа.
Обе панели содержат следующие настройки:
-
-
Регулирует степень стабильности или выразительности звучания голоса. Более низкие значения делают голос более динамичным и эмоциональным. Более высокие значения делают его звучание спокойнее и ровнее. Диапазон обозначен метками , и .
-
Регулирует степень соответствия голоса выбранному голосу. Более высокие значения делают голос более похожим на выбранный. Более низкие значения допускают больше вариаций.
После изменения параметров или требуется повторный дубляж. Затронутые сегменты получают статус «Изменено — требуется повторный дубляж». Нажмите «Дублировать изменения», чтобы применить обновлённые настройки.
Настройка скорости дубляжа
По умолчанию дубляж создаётся со скоростью 1×: система определяет наиболее естественный темп речи с учётом объёма текста в сегменте.
Если текст слишком длинный для временного интервала сегмента, отображается предупреждение Аудио может воспроизводиться быстрее. Отображается сообщение «Текст слишком длинный для временного интервала». Предупреждение появляется, если для соблюдения заданной длительности сегмента скорость воспроизведения аудио должна превышать 1,15×.
Чтобы настроить скорость дубляжа, используйте один из следующих методов:
-
Удлините или укоротите речевые облачка на звуковой волне:
Пример
Если при скорости 1× дублированная речь выходит за пределы нужной сцены, перетащите конечную границу речевого облачка. Дубляж немного ускорится, чтобы уместиться в сегменте.
-
Отредактируйте текст и выполните повторный дубляж или используйте функцию «Сократить сегменты с превышением лимита», чтобы получить более короткую версию текста.
Пример
Если при скорости 1× аудио значительно выходит за временные границы сегмента, возможно, в нём слишком много текста. Перепишите текст и нажмите «Дублировать изменения».
Фоновое аудио и воспроизведение
При первом создании дубляжа Phrase Studio отделяет речь от фонового аудио, например музыки и звуковых эффектов. Дублированное аудио смешивается с фоновым аудио, поэтому оригинальная речь не является частью дубляжа.
Чтобы заменить фоновое аудио, нажмите «Заменить фоновое аудио» в строке на осциллограмме и загрузите файл MP3, WAV или M4A размером менее 300 МБ.
Используйте ползунок в проигрывателе, чтобы настроить баланс между оригинальным аудио и дубляжом.
Скачивание дублированного результата
Чтобы скачать дублированный результат, нажмите «Скачать», выберите язык дубляжа и контент, а затем снова нажмите «Скачать».
Параметры дубляжа:
-
Дублированное аудио и дублированное видео.
-
Дублированные SRT и VTT.
-
Дублированное аудио по сегментам: ZIP-файл с одним MP3-файлом для каждого дублированного сегмента. Имена файлов содержат номер сегмента, имя диктора, а также время начала и окончания.
-
Дублированное аудио по дикторам: ZIP-файл с одним MP3-файлом для каждого диктора. Каждый файл содержит только дублированную речь одного диктора без фонового аудио, при этом его временная шкала охватывает всю длительность записи.
Произношение определяет, как конкретные слова или фразы произносятся в дублированном аудио. Такие правила обеспечивают единообразное произношение названий брендов, технических терминов, аббревиатур и иностранных слов.
Определите пользовательские пары произношения и применяйте их при создании дубляжа. Для существующих проектов выбирайте произношение при добавлении нового языка дубляжа на этапе в редакторе.
Произношения автоматически становятся доступны всем пользователям одной организации в режиме только для чтения.
Предварительные требования
-
целевой язык проекта поддерживает дубляж.
-
В проект был добавлен язык дубляжа.
Чтобы создать произношение, выполните следующие действия:
-
На странице выберите вкладку .
-
Нажмите «Создать новое произношение».
Откроется окно .
-
Введите и при необходимости .
-
Выберите , чтобы сделать произношение доступным для выбора в проекте.
-
Нажмите «Сохранить».
Произношение появится в списке на вкладке .
Пользовательские правила произношения также можно загрузить с помощью кнопки «Импорт» на вкладке . Поддерживаемые файлы: Лексикон PLS (.PLS, .XML), Excel (.XLSX) и CSV (.CSV). Файлы Excel должны содержать лист «IPA», а файлы CSV — столбцы «Term» и «IPA». Нотация CMU не поддерживается.
Примечание
Сохраняйте файлы CSV в формате «CSV UTF-8», иначе символы IPA могут быть повреждены. Файл может содержать до 10 000 пар и иметь размер до 10 МБ.
Каждое произношение может включать несколько пар для одного языка. Чтобы добавить пару произношения, выполните следующие действия:
-
Выберите существующее произношение и нажмите «Создать новую пару».
-
В поле введите исходное слово или фразу.
-
Укажите желаемое произношение в поле .
Используйте фонетическое написание, разбиение на слоги или приблизительное звучание.
-
Выберите тип .
-
Обычный текст (написание)
-
IPA (фонетическая)
-
-
Выберите соответствующий язык.
-
При необходимости нажмите «Предварительный просмотр», чтобы прослушать произношение и при необходимости скорректировать его.
-
Нажмите «Сохранить».
Новая пара добавляется к выбранному произношению.
Чтобы добавить произношение слова во время редактирования, нажмите «Управление произношениями» в сегменте на этапе . Произношение сохраняется в списке произношений проекта для выбранного языка. Управляйте ими в разделе .
Существующие произношения и связанные с ними пары можно обновить или удалить, выбрав «Редактировать» рядом с произношением или парой.
Запустите дубляж повторно после обновления пар произношения; ранее созданное аудио не изменится автоматически.
Примеры произношения
-
Названия брендов
-
Apple: эп-пл
-
Microsoft: май-кро-софт
-
-
Технические термины
-
GIF: джиф
-
SQL: эс-кью-эл
-
-
Иностранные слова
-
Круассан: круа-сан
-
Сан-Паулу: сау-пау-лу
-
Клонирование голоса создает синтетический голос на основе записей реального диктора. Клонированный голос затем можно использовать при дубляже с помощью ИИ, чтобы переведённая звуковая дорожка сохраняла интонацию и особенности голоса исходного говорящего.
Для обучения модели голоса используются выбранные фрагменты речи из загруженных аудио- или видеозаписей. После обработки образцов можно создать образец для предварительного прослушивания, прежде чем сохранить голос.
Клоны голоса создаются и управляются на вкладке страницы . После создания голос становится доступным для использования в рабочих процессах дубляжа.
Требования к образцу голоса
-
Общая длительность выбранных фрагментов должна составлять от 10 до 180 секунд
-
Максимальная длительность загружаемого файла: 5 минут
-
Максимальное количество файлов образцов: 3
-
Максимальный размер файла: 30 МБ на файл
-
Максимальное количество фрагментов образцов: 50
-
Если в образцах голоса слышно нескольких говорящих, необходимо выделить фрагменты с речью только одного из них.
Чтобы создать клон голоса, выполните следующие действия:
-
На вкладке страницы нажмите «Создать новый голос».
-
Выберите метод создания.
-
-
Если выбран вариант , введите описание в поле и при желании текст для предварительного прослушивания в поле . Нажмите «Создать образцы для прослушивания». Выберите голос и перейдите к шагу .
-
Нажмите «Загрузить образцы», чтобы создать клон голоса.
Загруженные медиафайлы отображаются в проигрывателе с осциллограммой, где можно выделять фрагменты.
-
На временной шкале выделите фрагменты с голосом диктора, затем нажмите «Готово». Общая длительность образца во всех выбранных фрагментах должна составлять не менее 10 секунд и не более 180 секунд.
Выбранные фрагменты подтверждены. Дополнительные файлы можно загрузить и обработать таким же образом, нажав «Добавить фрагменты».
Примечание
Для создания клона голоса используются только выбранные фрагменты.
-
Если используется параметр , установите флажок согласия.
-
Нажмите «Далее».
Отображается шаг и создается аудиообразец. Обычно это занимает несколько секунд.
-
Выберите для прослушивания образца и при необходимости введите . Новый голос говорит на всех языках, поддерживаемых в дубляже.
-
Нажмите «Воспроизвести предварительную версию» или значок воспроизведения, чтобы прослушать новый голос.
-
Если выбрано , выберите голос из предложенных вариантов. При необходимости используйте «Повторно создать предварительные версии».
-
Нажмите «Далее».
Отображается шаг .
-
Введите голоса. При необходимости укажите , и голоса для его классификации.
-
Нажмите Сохранить.
Новый голос будет добавлен в список .
Существующие клоны голосов можно прослушать, отредактировать или удалить на вкладке .
Доступность голоса можно ограничить одним проектом. Чтобы ограничить доступность голоса, отредактируйте его и выберите проект. Если проект не выбран, голос будет доступен везде.
Клонирование голосов из редактора
Примечание
Клонирование из редактора доступно только с использованием провайдера дубляжа ElevenLabs.
Создайте голос на основе дикторов записи на шаге .
-
Нажмите значок клонирования голоса () в сегменте, чтобы создать голос на основе аудиосегментов этого диктора в записи. В окне подтверждения выберите или подтвердите наличие прав на клонирование голоса.
-
Чтобы создать голоса для всех дикторов, нажмите на панели инструментов «Клонировать всех дикторов (N)», где
N— количество дикторов. Для диктора требуется не менее 10 секунд аудио в записи. Дикторы с меньшим объемом аудио пропускаются.
Голос, созданный в редакторе, доступен только в проекте, к которому относится запись. Чтобы изменить это, отредактируйте голос в разделе .