Стартап ElevenLabs, создающий универсальную машину для дубляжа с искусственным интеллектом, добавил поддержку более 20 языков. Среди них украинский, польский, хинди, португальский, испанский, японский и арабский.
Стартап ElevenLabs, создающий универсальную машину для дубляжа с искусственным интеллектом, добавил поддержку более 20 языков. Среди них украинский, польский, хинди, португальский, испанский, японский и арабский.
Компания Disney выпускает свои фильмы на английском языке, после чего дублирует их на 46 языках мира, пишет Engadget. Это масштабная задача, для выполнения которой у Disney есть целое подразделение — Disney Character Voices International Inc.
И это не то же самое, что вернуть Криса Пратта в студию звукозаписи, чтобы он озвучил свои реплики в «Стражах Галактики 3» по-исландски или по-украински — каждая версия звучит несколько по-разному, учитывая местных актеров.
К примеру, украинские зрители в кинотеатрах слышат голос Владимира Остапчука, а не самого Пратта. Но технологии ИИ-дубляжа от компании ElevenLabs скоро могут так точно воспроизвести голос Пратта, будто он не один год изучал украинский.
Пример работы ElevenLabs, где ИИ продублировал на украинском начало интервью dev.ua с Сергеем Галенкиным:
ElevenLabs — это стартап в области искусственного интеллекта, который предлагает услугу клонирования голоса, что позволяет подписчикам генерировать почти идентичные голоса с помощью искусственного интеллекта на основе загруженных аудио-образцов продолжительностью несколько минут. Неудивительно, что как только функция была выпущена в бета-версии, ее сразу же начали использовать, чтобы выдавать себя за знаменитостей, иногда даже без их предварительного сведения и согласия.
Новая функция ШИ-дубляжа делает по сути то же самое — более чем на 20 языках, включая хинди, португальский, испанский, японский, украинский, польский и арабский — но легально и с разрешения. Этот инструмент предназначен для использования медиакомпаниями, педагогами и интернет-влиятельными лицами, не имеющими всех денег мира, как Disney, для финансирования своих усилий по глобальной адаптации.
ElevenLabs утверждает, что система сможет не только переводить «разговорный контент на другой язык в считанные минуты», но и генерировать новый разговорный диалог на целевой язык, используя собственный голос актера. Или, по крайней мере, сгенерированную искусственным интеллектом реплику. Как сообщается, система даже способна сохранять «эмоции и интонации» существующего диалога и переносить его в сгенерированный перевод.
«Это поможет аудитории наслаждаться любым контентом, который они хотят, независимо от языка, на котором они говорят, — сказал генеральный директор ElevenLabs Мати Станишевский. «И это будет означать, что создатели контента смогут легко и аутентично получить доступ к гораздо большей аудитории по всему миру».
