Автоматический перевод аудио из видео: вот как это сделать

Updated July 23, 2024
Perevod audio - Smartcat blog
Smartcat covers all your language needs with AI translation, AI content generation and AI human workflows.

Вероятно, вы работаете в компании, которая хочет сделать видеоконтент более доступным для широкой аудитории. Будь то внутренние обучающие видеоролики компании, учебные материалы по продуктам для клиентов или маркетинговые видеоролики, вы, скорее всего, рассматриваете возможность перевода субтитров и добавления многоязычного дубляжа к вашим видеороликам.

Вот хорошая новость: перевод аудио из видео больше не является такой сложной задачей, как раньше. Это можно сделать без привлечения носителей языка в вашу команду или найма переводческих агентств. Вот как это сделать.

Почему перевод видео важен для международной аудитории?

Аудитория становится более глобальной, чем когда-либо. Когда речь заходит о привлечении глобальной аудитории и вовлечении сотрудников или клиентов, добавление аудиоконтента на большем количестве языков является для компаний надежным способом увеличить вовлеченность, количество подписчиков и доходы.

Достаточно посмотреть, как много Netflix инвестировал в неанглоязычный контент. По словам директора по глобализации компании Кэти Рокни, за два года после добавления 27 новых языков количество подписчиков компании удвоилось.

Недавно Peloton добавил к своему продукту дублированные уроки на немецком и французском языках. Согласно их FAQ, они будут расширять своё дублированное предложение с дополнительными языками со временем.

И преимущества очевидны:

  1. Субтитры и титры помогают увеличить просмотры видео на 80%

  2. Переведенный контент получает в 12 раз больше вовлеченности, чем не локализованный контент

  3. Компании могут наблюдать 50% повышение производительности благодаря обучению на родном языке учащихся, а также сокращение затрат на 50-70%

Не только индустрия развлечений извлекает выгоду из субтитров и дубляжа. Бренды, стремящиеся выйти на рынки новых стран, удержать существующих клиентов или повысить удовлетворенность сотрудников обучением с помощью многоязычных обучающих видео, также могут получить огромную выгоду.

Как перевести аудио из видео

Хотите начать перевод аудио из видео? Вот простой процесс из пяти шагов, с которого можно начать:

1. Перепишите исходный аудиофайл.

Первый шаг при переводе аудиофайла — тщательно расшифровать исходный аудиофайл вашего видео. Это можно сделать вручную или с помощью инструментов автоматической транскрипции видео:

  1. Ручная транскрипция предполагает, что транскрибаторы-люди прослушивают аудио-/видеозаписи и точно набирают произнесенные слова. Услуги транскрибаторов-людей стоят 1–1,50 доллара за минуту.

  2. С другой стороны, автоматическая транскрипция предполагает использование инструментов транскрипции для автоматического преобразования аудио в текст. И мы должны признать, что это намного быстрее и дешевле (от 0,10 до 0,20 доллара за минуту аудио), чем работа людей. Кроме того, благодаря тому, что многие крупные технологические компании сосредоточились на автоматической транскрипции, она будет становиться все лучше и дешевле.

Кратко об автоматической транскрипции видео

Автоматическая транскрипция использует распознавание речи для преобразования произнесенных слов в письменный текст. Даже если она еще не идеальна, компьютерные модели сейчас декодируют речь почти так же хорошо, как люди (при наличии подходящего типа аудио).

Автоматическая транскрипция — это очень умная вещь. И мы должны признать, что она работает намного быстрее, чем мы, люди. Подходит ли вам автоматическая транскрипция? В целом, ответ — да, но чтобы вам было проще принять решение, вы можете бесплатно зарегистрироваться и попробовать ее в действии.

2. Просмотрите и отредактируйте субтитры

После получения транскрипции вы можете проверить исходный текст, чтобы убедиться, что транскрипция выполнена правильно.

Насколько точной должна быть транскрипция? Это зависит от того, чего вы хотите достичь, но, как правило, вам понадобится полная транскрипция, которая будет практически идеальной с точки зрения точности передачи текста.

Примечание: Хотя большинство инструментов автоматической транскрипции имеют точность более 90% (точность транскрипции AI OCR Smartcat составляет 95%), могут быть случаи, когда система не распознает собственное имя. Или, если у говорящего есть акцент, ваш инструмент может не уловить все интонации, поэтому важно дважды проверять исходный текст.

3. Переведите субтитры

С помощью отполированной транскрипции вы теперь можете перевести текст на целевой язык (языки). Это можно сделать с помощью:

  1. Профессиональные лингвисты для оказания услуг по переводу

  2. Инструменты искусственного интеллекта для перевода

  3. Сочетание обоих вариантов

Какой из этих вариантов выбрать? Опять же, все зависит от вашего контента и целей. Если у вас есть контент высокой приоритетности, наполненный культурными отсылками и юмором, которые сильно зависят от контекста, скорее всего, вам будет достаточно только инструментов искусственного интеллекта. Локализация медиа — это упражнение в технике и креативности, и вам понадобятся профессионалы, чтобы ваш уникальный стиль и голос были переданы правильно.

При создании субтитров необходимо учитывать некоторые особенности. Вы беспокоитесь о том, сколько места и времени они займут. Именно здесь и возникают различные соображения:

Что такое скорость чтения?

Скорость чтения — это время, которое, по вашим ожиданиям, потребуется человеку для прочтения субтитров. Очевидно, что она может отличаться для взрослых и детей, поэтому вам следует иметь четкое представление о том, что хочет ваша целевая аудитория. Приблизительная оценка: для удобного чтения следует отводить 2 секунды на каждую строку текста.

Какова синхронизация с аудио?

Если субтитры не синхронизированы с аудио с точностью до нескольких кадров, зрители могут почувствовать себя отвлеченными или раздраженными тем, что что-то слишком долго остается на экране или что они что-то пропустили.

Точность

Вы хотите оставаться верным источнику и предоставить максимально точный перевод. Но часть эффективного перевода заключается в том, чтобы понять, где нужно найти баланс, и умно адаптироваться, чтобы обеспечить беспроблемный опыт.

4. Проверьте свои переводы

После перевода очень важно проверить содержание на точность, культурную уместность, длину, интервалы и синхронизацию. Вот несколько полезных советов, которые следует помнить при проверке переводов:

Длина и интервалы

По возможности старайтесь придерживаться одной строки, максимум двух строк на экране одновременно.

Синхронизация

Также очень важно обеспечить правильную синхронизацию. Субтитры должны появляться, когда говорящий начинает говорить, и исчезать сразу после того, как он заканчивает.

Контроль качества (QA)

Перед публикацией проверьте субтитры и видео. Также рекомендуется работать с местными заинтересованными сторонами или партнерами, чтобы они их проверили. Они могут проверить, можно ли прочитать строку за отведенное время, и перепроверить ее значение.

5. Создайте переведенный аудиофайл

До сих пор компании и создатели контента сталкивались со значительными затратами и временными барьерами при выходе на мировую арену. Хотя технологии генеративного искусственного интеллекта могут помочь быстро преобразовать голос на другой язык, они не гарантируют, что сгенерированный аудиофайл правильно передаст исходное сообщение в другой культуре.

Чисто автоматизированные системы не обладают достаточной сложностью, чтобы обеспечить аутентичность и эмоциональное воздействие, необходимые брендам для передачи своего видения и намерений. Кроме того, последние примеры генеративных голосовых технологий искусственного интеллекта не готовы решить эту проблему, поскольку они обычно ограничены одним говорящим и не поддерживают аудиоконтент, кроме голоса. Последний шаг — создание нового аудио на целевом языке. Это можно сделать следующим образом:

  • Актеры озвучивания, записывающие переведенный сценарий

  • Технология преобразования текста в речь

  • Дубляж с помощью искусственного интеллекта для получения естественного звучания

Оптимизация процесса с помощью редактора субтитров Smartcat

Новый инструмент Smartcat для создания субтитров и многоязычного дубляжа на базе искусственного интеллекта — первый в своем роде инструмент для дубляжа, который автоматически транскрибирует аудио- или видеоисточник, переводит его на язык перевода и позволяет редактировать перевод.

Многие компании из списка Fortune 1000 используют редактор субтитров Smartcat для создания более быстрых и оптимизированных рабочих процессов. С помощью Smartcat они просто загружают видео, выбирают язык (поддерживается более 280 языков), транскрибируют и переводят с помощью ИИ, проверяют и редактируют, а также добавляют дубляж к своим многоязычным видео.

Вот упрощенный обзор того, как это работает:

  1. Загрузите видео на платформу Smartcat

  2. Позвольте ИИ автоматически транскрибировать аудио

  3. Проверьте точность сгенерированной транскрипции

  4. Выберите язык и воспользуйтесь искусственным интеллектом для перевода текста

  5. Проверьте и отредактируйте переведенную транскрипцию по мере необходимости

  6. Создайте версию с дубляжом искусственного интеллекта с естественно звучащими голосами

  7. Скачайте готовое многоязычное видео

  1. Загрузите свое видео на платформу Smartcat

2. Позвольте ИИ автоматически транскрибировать аудио

3. Проверьте точность сгенерированных субтитров

4. Используйте перевод с помощью искусственного интеллекта, чтобы преобразовать текст на целевой язык

Внесите необходимые изменения в текст на языке перевода и временные коды, как вы уже сделали для сегментов исходного текста. Важно понимать, что, в отличие от сегментов исходного текста, переведенные сегменты не всегда будут точно соответствовать временным кодам.

Однако вы все равно можете обеспечить правильное позиционирование с помощью оригинальной структуры текста и контекста видео с помощью предварительного просмотра видео.

5. Просмотрите и отредактируйте переведенную транскрипцию по мере необходимости

6. Создайте версию с искусственным озвучиванием с помощью ИИ и естественно звучащими голосами

7. Загрузите готовое многоязычное видео

5 лучших практик, которым следует следовать при переводе аудио

  1. Автоматизируйте, автоматизируйте, автоматизируйте: у вас может быть сотни или тысячи видео, которые нужно перевести. Если вы хотите перевести видео на другой язык, не говоря уже о пяти или 15, это может быть довольно сложным процессом. Поэтому вам нужно сосредоточиться на автоматизации, где это возможно, используя автоматическую транскрипцию, дубляж и инструменты.

  2. Начните с высококачественного исходного материала: помимо технических аспектов, таких как обеспечение четкого звука и хорошо артикулированной речи в исходном видео, убедитесь, что исходный контент на языке оригинала удобен для перевода. Это сделает процесс транскрипции и перевода гораздо более точным и сократит время выхода на рынок. Кроме того, вы сможете легко перепрофилировать контент на всех языках.

  3. Установите стандарты качества: Процесс обеспечения качества и проверка переведенного текста имеют особое значение. Определите стилевые руководства для каждого языка, чтобы обеспечить точность и согласованность, и не пренебрегайте их внедрением.

  4. Обратите внимание на скорость чтения, синхронизацию с аудио и : В видеоконтенте синхронизация имеет решающее значение. Убедитесь, что переведенный аудиоматериал хорошо согласуется с изображениями на экране и наложенным текстом.

  5. Протестируйте переведенные видео и проанализируйте их эффективность: единственный способ узнать, работают ли ваши многоязычные видео так, как должны, — это проводить регулярный анализ их эффективности. Для получения обратной связи привлекайте носителей языка или тестировщиков по обеспечению качества, которые хорошо понимают вашу целевую аудиторию.

Пример использования AI-переводчика аудио

На 70 % более быстрая транскрипция и перевод субтитров с помощью Smith+Nephew

Smith+Nephew — многонациональный производитель медицинского оборудования, который предоставляет своим сотрудникам по всему миру обучающие видеоролики для электронного обучения на семи языках. Благодаря партнерству с Smartcat компания смогла:

Задача, которую решила Smartcat – Внедрение редактора субтитров Smartcat и дубляжа с помощью искусственного интеллекта помогло команде:

  • Сокращение времени на подготовку файлов: благодаря возможности автоматического добавления субтитров из голосового сопровождения видео, компания Smith+Nephew смогла сократить время на подготовку файлов для транскрипции субтитров на 70%

  • Эффективное сотрудничество с учетом общего контекста и связности: благодаря тому, что вся работа ведется в одном рабочем пространстве Smartcat, команда переводчиков может беспрепятственно сотрудничать, сохраняя результаты в режиме реального времени.

  • Повышение точности транскрипции и перевода субтитров: команда обнаружила, что теперь она может предотвращать ошибки, редактируя текст исходного языка видеосубтитров перед переводом. Кроме того, она может вносить изменения быстро и напрямую, не привлекая команду графических дизайнеров.

«Когда Smartcat выпустила новую функцию, позволяющую автоматически извлекать субтитры из видеозаписей, что дало возможность быстро редактировать исходный текст для идеального автоматического перевода и постредактирования, время подготовки файлов сократилось на 70%», — говорит Барбара Федорович, руководитель отдела переводов в Smith+Nephew.

Сегодня операции по аудиопереводу в Smith+Nephew управляются с помощью инструмента Smartcat для перевода видео с помощью искусственного интеллекта. Это центральный узел для менеджеров проектов, переводчиков и всех, кто участвует в процессе. Он включает в себя автоматическую транскрипцию видео, перевод с помощью искусственного интеллекта, редактор субтитров и естественное звучание с поддержкой более 100 языков.

Результаты:

  • Снижение рабочей нагрузки на 70 %

  • Создание 15–20 новых видеокурсов на каждый язык каждый квартал

  • Заметная экономия средств по сравнению с сторонними поставщиками

Ознакомьтесь с полным исследованием.

Хотите узнать больше?

Вот что вы можете сделать дальше:

1. Зарегистрируйтесь в Smartcat и привлеките аудиторию со всего мира, чтобы удержать и привлечь клиентов. Переведя свои аудиозаписи, вы сможете охватить международную аудиторию и значительно повысить уровень вовлеченности.

2. Зарегистрируйтесь сегодня, чтобы воспользоваться 14-дневной бесплатной пробной версией Smartcat и начать перевод аудиофайлов.

Переведите свои видео и аудиофайлы с помощью искусственного интеллекта
💌

Подписывайтесь на нашу новостную рассылку

Электронная почта *