Джо Марінг / Android Authority
Tl; dr
- YouTube планує запустити синхронізацію губ AI, щоб автоматично оприлюднити відео.
- Незабаром він може почати тестувати цю функцію англійською, французькою, німецькою, португальською та іспанською мовою.
- Ця функція може мати додаткові збори, які, ймовірно, повинні нести користувачі.
Вам це подобається чи ні, Google не відмовляється від своїх спроб збільшити взаємодію, автоматично перекладаючи аудіо в рідну мову. Тепер, слідуючи безперервним та непохитним ударам при простому перекладі аудіо за допомогою автоматичного використання, YouTube може взяти його на вищу вищу за допомогою реалістичних аудіо-дубів з точною синхронізацією губ, намагаючись зробити відео більш привабливими з AI.
Ведучий продукту YouTube для автоматичного дубінгу, Буддіка Коттахчі, нещодавно детально розповів технологію, що стоїть за синхронізованими губами Autodubs у розмові зЦифрові тенденції. Коттахчі повідомив публікацію, що система вносить хитромудрі зміни на рівні пікселів, щоб змінити рот динаміка, забезпечуючи, щоб дуб виглядає реалістично. Він працює від звичайного AI, побудованого для розуміння нюансів структури обличчя, включаючи 3D сприйняття губ, зубів і навіть різних міміок. Дивлячись на успіх Google за допомогою своєї моделі Text-to-Video VEO3, ми вважаємо, що вона повинна мати можливість здійснити подвиг із переконливим рівнем реалізму.
На даний момент функція синхронізації LIP підтримує лише роздільну здатність 1080p і не може обробити 4K відео. Підтримка мови також буде обмежена англійською, французькою, німецькою, португальською та іспанською мовою, але компанія планує розширити її на понад 20 мов - усі ціВ даний час підтримуєтьсяза функцією автоматичного дублення YouTube.
Не хочете пропустити найкраще від Android Authority?
Більше читання:Як додати багатомовні аудіо доріжки до відео YouTube (ручне дубляж на YouTube)
YouTube не дає жодних конкретних обіцянок щодо наявності його функції, але це може розпочатися як пілот з невеликим набором творців, як цеспочатку робивз функціональністю автоматичного дублення. Враховуючи, що він був розгорнутий до більш широкого набору користувачів лише минулого місяця, Sync Lip може зайняти власний солодкий час, щоб стати доступними для більшої кількості каналів. І хоча очікується лише розширення охоплення, ми можемо очікувати, що творці матимуть можливість вимкнути функцію для свого каналу чи конкретних відео.
Як повідомляється, ця функція також припадає на додаткову ціну, хоча точна цифра не була доопрацьована. Будь то споживач чи канал, який має ціну на функцію, також варто побачити, хоча це, ймовірно, буде першим.
Природно, занепокоєння щодо автоматичних синхронів губ, які зловживають, неодмінно виникають, особливо коли інші канали репостують відео без належного авторизації. Намагаючись боротися з цим, YouTube має намір додати описовий розкриття, а також невидимий відбиток пальців, схожий на Synthid.
Зокрема, YouTube - не єдина відео -платформа з такими планами. Минулого року META запустила пілотну програму з Instagram Creators, щоб дублювати та синхронізувати губи на інші мови. Ми ще не дізналися більше про його успіх, за винятком того, що це було нещодавнорозширенийдо чотирьох мов, включаючи англійську, хінді, португальську та іспанську мову.
Дякую за те, що ви були частиною нашої громади. Прочитайте нашу політику коментарів перед публікацією.
