Этот новый инструмент дубляжа с искусственным интеллектом может переводить звук, сохраняя при этом голос говорящего.

Если вы когда-нибудь смотрели дублированный фильм или шоу, вы знаете, насколько это неестественно. Часто голос говорящего не меняется у разных персонажей или его шаблоны и колебания совершенно не совпадают. Новая функция искусственного интеллекта ElevenLab призвана решить эту проблему.

Во вторник ElevenLabs представила AI Dubbing, новую функцию, которая может конвертировать устный контент в другой. язык, сохраняя при этом голос, речевые модели, эмоции и интонации исходного говорящего.

Также: Ген ИИ – угроза трудоустройству? Напротив, работники-люди могут много выиграть

Функция искусственного дубляжа предназначена для того, чтобы позволить аудитории по всему миру наслаждаться любимым контентом на родном языке, конвертируя его за считанные минуты.

Функция AI Dubbing сочетает в себе многоязычный синтез речи ElevenLab, клонирование голоса, текста и аудио. обработка для сохранения характера исходного содержания при создании перевода, согласно компания.

В своем выпуске генеральный директор и соучредитель ElevenLabs Мати Станишевски поделился своим негативным опытом развития дублированного контента и тем, как новая технология может стать решением.

«Когда мы росли в Польше, мы смотрели фильмы на английском языке, которые были озвучены одним диктором. Это означает, что у каждого актера одинаковый голос. От этого опыта требуется так много волшебства», — сказал Станишевски.

«Выпуск AI Dubbing — это наш самый большой шаг на пути к устранению языковых барьеров в контенте. Это поможет зрителям наслаждаться любым контентом, который они хотят, независимо от языка, на котором они говорят».

Также: Искусственный интеллект и данные: оттачивание гиперперсонализации для создания банка будущего

Функция AI-дублирования будет поддерживать более 20 языков, которые в настоящее время поддерживаются Eleven. Многоязычная модель v2.

Полный список включает английский, японский, китайский, немецкий, хинди, французский, корейский, португальский, итальянский, испанский, индонезийский, голландский, турецкий, Филиппинский, польский, шведский, болгарский, румынский, арабский, чешский, греческий, финский, хорватский, малайский, словацкий, датский, тамильский и Украинец.

Дублирование с использованием искусственного интеллекта доступно для всех пользователей начиная с сегодняшнего дня, а цена зависит от того, сколько персонажей вы хотите дублировать.