Дублирование заменяет оригинальный звук в файле на новую версию на другом языке, сохраняя характеристики голоса и эмоциональный тон оригинальных говорящих.
Правильное назначение говорящего необходимо для рабочих процессов дублирования. Если используются импортированные файлы субтитров для пропуска автоматической транскрипции аудио, убедитесь, что все говорящие назначены перед переходом к дублированию.
Примеры использования
-
Медийная компания хочет распространить документальный фильм на английском языке в Испании и Японии. Искусственный интеллект платформы идентифицирует каждого говорящего, транскрибирует и переводит диалоги, а затем генерирует новые аудиотреки на испанском и японском языках. Сгенерированные голоса сохраняют качества оригинальных говорящих, создавая аутентичный опыт просмотра для новой аудитории.
Чтобы создать дублирование для файла, выполните следующие шаги:
-
Рядом с именем файла выберите следующую часть рабочего процесса из выпадающего списка. После Перевести выберите Дублировать.
-
Нажмите Добавить дублирование. Дублирование может быть добавлено только для языков, которые уже были переведены.
-
Выберите необходимые переведенные языки из выпадающего списка.
Примечание
Если выбрана региональная языковая вариация (например, французский (Канада) или португальский (Бразилия)), система автоматически возвращается к соответствующему базовому языку для дублирования.
Региональный выбор языка все еще сохраняется в проекте и метаданных.
-
При желании, включите , чтобы выбрать существующие произношения и связанные пары для рабочих процессов дублирования.
-
При желании, загрузите файл субтитров, чтобы продолжить с этапом дублирования. (Поддерживаются SRT/VTT).
-
Нажмите Начать дублирование.
Окно закрывается, и вкладка указывает, когда дублирование завершено.
Нажмите Перезаписать дубляж, чтобы повторно запустить дублирование для выбранного языка.
Нажмите Изменить дубляж, чтобы обновить дубляж с любыми изменениями в тексте.
Нажмите Управление голосами, чтобы выбрать другой голос для дублирования. Для каждого языка автоматически предлагается до 7 рекомендуемых голосов на основе соответствия по полу и возрасту.
Пользовательские голоса поддерживаются только с поставщиком дублирования ElevenLabs. Чтобы использовать пользовательский голос, выберите ElevenLabs в качестве поставщика дублирования в настройках проекта (для существующих проектов) или в общих настройках (для новых проектов).
Элементы управления аудио помогают сделать дублирование более выразительным и точным, отмечая ключевые вокальные нюансы, которые добавляют паралингвистическую информацию. Щелкните правой кнопкой мыши на сегменте, чтобы в нужном месте, выбрав один или несколько доступных вариантов.
Примечание
Элементы управления аудио могут не работать со всеми языками или голосовыми моделями. Рекомендуется протестировать выбранный голос, чтобы подтвердить совместимость.
Аудио настройки или перезаписи после тестирования не потребляют дополнительные минуты.
Когда проект включает несколько говорящих, настройки дублирования могут быть настроены для каждой дорожки говорящего и для отдельных сегментов на вкладке .
-
Элементы управления дорожкой говорящего
-
Нажмите на значок громкости
рядом с именем желаемого говорящего на звуковой волне, чтобы отрегулировать ползунок громкости. Настройка применяется ко всем сегментам, произнесенным этим говорящим.
-
-
Элементы управления сегментом
-
-
Контролирует, насколько единообразным и предсказуемым звучит сгенерированный голос.
-
Контролирует, насколько близко сгенерированный голос соответствует выбранному профилю голоса.
Выберите сегмент на временной шкале, чтобы открыть панель и при необходимости отрегулировать настройки дубляжа. Нажмите Сохранить сейчас в правом верхнем углу вкладки , чтобы сохранить изменения.
Необходим повторный дубляж после изменения или . Нажмите Применить изменения, чтобы применить обновленные настройки.
-
Отрегулировать скорость дубляжа
По умолчанию дубляж создается с 1× скоростью, что означает, что система определяет наиболее естественный темп речи на основе объема текста в сегменте.
Текущая скорость отображается в виде метки на каждом пузыре речи на временной шкале.
Существует два метода для регулировки скорости дубляжа, если это необходимо:
-
Увеличьте или уменьшите пузыри речи на звуковой волне:
Пример
Если озвученный аудиотрек выходит за пределы предполагаемой сцены при 1× скорости, перетащите конечное время пузыря речи. Дубляж немного ускорится, чтобы вписаться в сегмент, и метка скорости будет обновлена соответственно.
-
Отредактируйте текст и повторите дубляж:
Пример
Если аудио значительно превышает пределы при 1× скорости, сегмент может содержать слишком много текста. Перепишите текст и дублируйте изменения.
Произношения контролируют, как конкретные слова или фразы произносятся в дублированном аудио. Они обеспечивают единообразное произношение названий брендов, технических терминов, акронимов и иностранных слов.
Возможно определить пользовательские пары произношений и применить их к рабочим процессам дублирования во время создания проекта.
Для существующих проектов произношения также могут быть выбраны при добавлении нового языка дублирования на вкладке редактора.
Произношения автоматически делятся со всеми пользователями одной организации в режиме только для чтения.
Предварительные условия
-
Целевой язык проекта поддерживает дублирование.
-
Язык дублирования был добавлен в проект.
Чтобы создать произношение, выполните следующие шаги:
-
На странице выберите вкладку .
-
Нажмите Создать новое произношение.
Окно отображается.
-
Введите и необязательное .
-
Выберите , чтобы сделать произношение доступным для выбора в проекте.
-
Нажмите Сохранить.
Произношение отображается на вкладке .
Каждое произношение может включать несколько пар для одного языка. Чтобы добавить пару произношений, выполните следующие шаги:
-
Выберите существующее произношение и нажмите Создать новую пару.
-
Укажите оригинальное или фразу.
-
Определите желаемое произношение в поле .
Используйте фонетическую запись, разбиение на слоги или приблизительные звуки.
-
Выберите соответствующий язык.
-
При желании нажмите Preview, чтобы прослушать и при необходимости отрегулировать.
-
Нажмите Сохранить.
Новая пара добавляется к выбранному произношению.
Существующие произношения и связанные пары можно обновить или удалить, выбрав Edit рядом с произношением или парой.
Повторно запустите дубляж после обновления пар произношений; ранее созданный аудиофайл не изменится автоматически.
Примеры произношения
-
Брендовые названия
-
Apple: ап-пл
-
Microsoft: май-кроуфт
-
-
Технические термины
-
GIF: джиф
-
SQL: эс-кью-эл
-
-
Иностранные слова
-
Круассан: ква-ссан
-
Сан-Паулу: сау-пау-лу
-
Клонирование голоса генерирует синтетический голос на основе записей реального говорящего. Клонированный голос затем может быть использован в ИИ-дубляже, позволяя переведенному аудио сохранить тон и вокальные характеристики оригинального говорящего.
Процесс клонирования использует выбранные диапазоны речи из загруженных аудио- или видеозаписей для обучения голосовой модели. После обработки образцов можно сгенерировать предварительный просмотр перед сохранением голоса.
Голосовые клоны создаются и управляются во вкладке на странице . После создания голос становится доступным для использования в дубляже.
Требования к образцам голоса
-
Общая продолжительность выбранного диапазона должна быть от 15 до 180 секунд.
-
Максимальная продолжительность загруженного файла: 5 минут.
-
Максимальное количество файлов образцов: 3.
-
Максимальный размер файла: 30 МБ на файл.
-
Максимальное количество диапазонов образцов: 50.
-
Если образцы голоса содержат несколько говорящих, диапазоны должны использоваться для изоляции образцов от одного говорящего.
Чтобы создать голосовой клон, выполните следующие шаги:
-
На вкладке на странице нажмите Создать новый голос.
Отображается раздел .
-
Загрузите образцы, чтобы сгенерировать голосовой клон.
Загруженные медиафайлы отображаются в проигрывателе волновой формы, где можно отметить диапазоны.
-
Используйте временную шкалу, чтобы определить диапазоны, содержащие голос говорящего, затем нажмите Готово.
Выбранные диапазоны подтверждены. Дополнительные файлы могут быть загружены и обработаны таким же образом, нажав Добавить диапазоны.
Примечание
Только выбранные диапазоны используются для генерации голосового клона.
-
Выберите флажок согласия и Подтвердить.
-
Нажмите След..
Этап отображается.
-
Введите голоса. При желании укажите голоса, и для его категоризации.
-
Нажмите След..
Этап отображается. Первый предварительный просмотр создается автоматически.
-
Выберите и укажите .
-
Нажмите Предварительный просмотр голоса.
Аудио образец создается. Это обычно занимает несколько секунд.
-
Нажмите Сохранить.
Новый голос добавляется в список .
Существующие клоны голоса могут быть предварительно просмотрены или удалены из вкладки .