🚀 Trustee Plus - ваш криптогаманець з вбудованою платіжною карткою тут 👉
Олексій ДзюбаГаряченьке
28 червня 2023, 21:19
2023-06-28
Український стартап Respeecher представив новий сервіс на Product Hunt. Як світові зірки заговорили українською завдяки йому
Ai-стартап Respeecher, заснований українцями, запустив на Product Hunt Marketplace, щоб сервіс, який трансформує за допомогою штучного інтелекту голоси голлівудських зірок, став доступним не лише для компаній, а й для звичайних людей.
Ми вирішили нагадати про унікальну розробку, про яку розповів нам Олександр Сердюк, один із засновників компанії.
Ai-стартап Respeecher, заснований українцями, запустив на Product Hunt Marketplace, щоб сервіс, який трансформує за допомогою штучного інтелекту голоси голлівудських зірок, став доступним не лише для компаній, а й для звичайних людей.
Ми вирішили нагадати про унікальну розробку, про яку розповів нам Олександр Сердюк, один із засновників компанії.
текст від 4 травня 2022 року
Про компанію та інвестиції
Respeecher як компанія існує з 2018 року, а заснували її українці Дмитро Бєлєвцов та Олександр Сердюк, а також американець Грант Рібер. Із 2018 року компанія залучила понад $3 млн інвестицій. Усього у компанії працює 37 осіб, це люди з унікальним бекграундом озвучки фільмів та музичної індустрії. Також це і програмісти, спеціалісти з нейронних мереж, комунікаційники та потужна команда біздеву.
Фото — Олександр Сердюк
Про технологію
Розкажу на прикладі відео із Мей Маск. Вона записала відео, де своїм голосом англійською висловлює підтримку українцям. Погодила саму ідею, щоб ми відтворили її запис й конвертували в українську мову. Лише тоді як отримали її погодження взяли у роботу: кілька днів наша ML–модель тренувалась на інтерв’ю та інших аудіозаписах Мей. Далі нейромережа проаналізували ці записи та наклала її голос на аудіо доріжку, яку дублер начитав українською. В результаті у Twitter–пості Мей Маск ви чуєте як звучить її звернення українською, але її голосом.
Щось схоже відбувалось і відео в пам’ять Avicii, яке зробив володар Гремі Aloe Blacc. Ми допомогли записати цю пісню голосом Aloe, але трьома різними мовами — іспанською, мандаринською та англійською.
Ми вийшли на Мей Маск, тому що маємо хороший нетворк (сміється). В цілому ми як усі хотіли долучитись і підтримати країну у тій формі якій можемо. Тому й запустили ініціативу Share UA Voices.
«Ми хотіли почути як світові зірки підтримують нас саме українською мовою, почути як їхні голоси звучатимуть солов'їною».
Адже відомо що російська політика та активна інформаційна війна націлена проти української мови та культури в цілому. Круто що окрім матері Ілона Маска до ініціатив долучались і героїня Netflix серіалу Orange is a new Black — Ебігейл Севедж. Також на цей час у роботі ряд інших подібних проєктів з відомими людьми. Кошти не проходять через нас, а на пряму зачислюються фонду «Повернись живим», тому не володіємо інформацією.
Про те, як синтезували голоси для серіалів «Мандалорець» і «Боба Фетт»
Головна специфіка роботи з ним що про багато нюансів та аспектів роботи, які не можна розголошувати через NDA. В останньому епізоді серіалу «Мандалорець» Lucasfilm (тепер Walt Disney) з’явився головний герой — молодий Люк Скайуокер. Оскільки Марк Хемілл грає персонажа з 1977 року, тож на момент виходу епізоду серіалу йому вже було 68.
Фото — Марк Хемілл
Нашим завданням було зробити так щоб мільйони фанатів Зоряних Війн почули саме той голос Люка Скайвокера, який вони чули багато років тому. Технологія проаналізувала аудіозаписи молодого Хемілла за допомогою нейронних мереж та дозволила відтворити голос саме тієї епохи. Ніхто не підозрював, що голос штучний, поки команда Лукасфілм не розповіла про це. До речі, було дуже приємно бачити що Хемілл також зараз активно підтримує Україну.
Про те, як виграли премію «Еммі»
Ми отримали Еммі за документалку. Не скажу що змінило наше життя, але це точно круте свідчення для команди і для нас що рухаємось у правильному напрямку. Якби ми мали нагороди усіх голлівудських проєктів у яких ми взяли участь то місця для них в офісі не вистачило б. Для нас важливими пріоритетами є якість технології та етичність її використання, тому думаю Emmy Awards це свого роду валідація обох критеріїв.
Фото — Respeecher
Про порівняння з Reface
Не надто компетентно порівнювати. Це два дуже різні, але дуже круті продукти родом з України, втім у нас різні ніші на напрямки. Respeecher з’явився на світ на рік раніше. Ми поважаємо і вболіваємо за Reface, як і за інші українські стартапи. Наша ніша це все ж професійне голосове клонування для Голлівудських фільмів.
«Окремим напрямом для нас зокрема є healthcare і те як наша технологія може допомагати людям із захворюваннями, які призводять до часткової втрати голосу чи погіршення можливості розмовляти».
Наприклад, актор Майк Йорк відомий своєю роллю у фільмі Остін Пауерс сам звернувся до нас через те, що частково втратив голос внаслідок захворювання амілоїдоз. Завдяки нашій AI технології він зміг своїм голосом озвучити освітній відеоролик який розповідає людям про це захворювання. Це приклад того, як новітні технології, як клонування голосу, можуть покращити якість життя людей.
Про плани
Головний план — підкорити Голлівуд, і щоб бодай половина оскароносних акторів звучали українською завдяки нашій технології (сміється).
«Якщо серйозно, то Respeecher матиме ряд продуктів і окрім роботи із голлівудськими фільмами, геймінг брендами та зірками з музичної індустрії ми запустили ще один продукт Voice Marketplace, який наразі активно використовується девелоперами ігр та анімацій, професійними звукачами та навіть голосовими акторами».
Respeecher зовсім нещодавно вивів у продакшн систему заміни голосу у реальному часі. У 2021 році ми відкрили для технології новий ринок дубляжу — можемо зберігати оригінальні голоси акторів при озвучці різними мовами. Ми будуємо ряд технологічних продуктів на базі основної технології. Також і надалі будемо фокусуватись на темі застосування нашої технології у медичній сфері та етичності використання AI технології. Як лідери в області синтезованої мови, бачимо у цьому важливу місію.
Читайте головні IT-новини країни в нашому Telegram
УЧАСТЬ В АЗАРТНИХ ІГРАХ МОЖЕ ВИКЛИКАТИ ІГРОВУ ЗАЛЕЖНІСТЬ. ДОТРИМУЙТЕСЯ ПРАВИЛ (ПРИНЦИПІВ) ВІДПОВІДАЛЬНОЇ ГРИ.
Ліцензія видана ТОВ "СЛОТС Ю.ЕЙ." на провадження діяльності з організації та проведення азартних ігор казино у мережі Інтернет від 15.09.23 (рішення КРАІЛ №245 від 31.08.2023); ТОВ "СЛОТС Ю.ЕЙ." – на провадження діяльності з організації та проведення азартних ігор казино у мережі Інтернет від 26.04.2021 (рішення КРАІЛ №150 від 12.04.2021); ТОВ «СПЕЙСИКС» – на провадження діяльності з організації та проведення азартних ігор казино у мережі Інтернет від 08.02.2021 (рішення КРАІЛ №34 від 02.02.2021); ТОВ «ГЕЙМДЕВ» – на провадження діяльності з організації та проведення азартних ігор казино у мережі Інтернет від 16.02.2021 (рішення № 47 від 10.02.2021).
