在近日于北京希爾頓酒店舉辦的T-EDGE大會(huì)上，一位來(lái)自加拿大的科技創(chuàng)新者吸引了全球目光。LipDub.AI公司的創(chuàng)始人兼首席執(zhí)行官喬納森·布朗夫曼在主題演講中，展示了一項(xiàng)革命性的唇部同步技術(shù)，該技術(shù)不僅極大地降低了視頻制作成本，同時(shí)保持了高質(zhì)量水準(zhǔn)。

在視頻制作領(lǐng)域，“昂貴”與“耗時(shí)”往往是人們最先聯(lián)想到的詞匯。好萊塢之所以能在全球電影制作中獨(dú)占鰲頭，很大程度上得益于其雄厚的資金支持。然而，布朗夫曼所帶來(lái)的這項(xiàng)技術(shù)，正試圖打破這一固有印象。

演講現(xiàn)場(chǎng)，布朗夫曼通過(guò)一系列演示，展示了LipDub.AI技術(shù)的驚人效果。當(dāng)一位前《紐約時(shí)報(bào)》記者、來(lái)自華盛頓州的克雷格·史密斯用普通話詢問(wèn)費(fèi)率時(shí)，僅憑其唇部動(dòng)作，觀眾可能會(huì)誤以為他是中國(guó)人。他還展示了如何將視頻內(nèi)容從弗拉芒語(yǔ)翻譯成英語(yǔ)，以及如何通過(guò)簡(jiǎn)單輸入新臺(tái)詞，從舊視頻中生成全新內(nèi)容。這項(xiàng)技術(shù)的潛力不僅限于此，它還能快速掌握《阿凡達(dá)》、《星際迷航》或《權(quán)力的游戲》等科幻作品中的語(yǔ)言，讓飽受字幕和外語(yǔ)困擾的影迷們得以解脫。

布朗夫曼的另一重身份是MARZ（Monsters, Aliens, Robots, Zombies）公司的首席執(zhí)行官，該公司曾為迪士尼、Netflix和亞馬遜等巨頭提供視覺(jué)特效服務(wù)。在這一過(guò)程中，他深刻意識(shí)到行業(yè)內(nèi)的同質(zhì)化問(wèn)題：大家使用相同的技術(shù)棧和藝術(shù)家資源。因此，2019年，他決定將人工智能作為突破口，以在成本、時(shí)間和效率上獲得競(jìng)爭(zhēng)優(yōu)勢(shì)。

在他的帶領(lǐng)下，一支由特拉維夫大學(xué)視覺(jué)計(jì)算教授丹尼爾·科恩-奧爾和西蒙弗雷澤大學(xué)計(jì)算機(jī)科學(xué)助理教授阿里·馬哈達(dá)維-阿米里領(lǐng)銜的世界級(jí)研發(fā)團(tuán)隊(duì)?wèi)?yīng)運(yùn)而生。他們的首個(gè)產(chǎn)品Vanity，能夠在傳統(tǒng)視覺(jué)特效流程的基礎(chǔ)上，實(shí)現(xiàn)2D老化、年輕化、美化、假發(fā)和假體修復(fù)等效果，速度提升高達(dá)300倍。這一產(chǎn)品在好萊塢因其高性價(jià)比和卓越品質(zhì)而備受好評(píng)。

2021年，布朗夫曼在觀看Netflix上的韓劇《魷魚(yú)游戲》時(shí)，注意到一個(gè)細(xì)節(jié)：盡管該劇在英語(yǔ)市場(chǎng)大受歡迎，但唇部同步卻存在明顯問(wèn)題。他立即聯(lián)系了科恩-奧爾和馬哈達(dá)維-阿米里，并決定著手解決這個(gè)問(wèn)題。于是，專為好萊塢打造的唇部同步技術(shù)——LipDub應(yīng)運(yùn)而生。

“這不是TikTok上的濾鏡，這是真正的4K高清分辨率。你需要調(diào)整姿勢(shì)、更換相機(jī)、改變光線和遮擋物?！辈祭史蚵鼜?qiáng)調(diào)道。他指出，好萊塢仍然是行業(yè)的北極星和制片人的終極市場(chǎng)。

LipDub的應(yīng)用場(chǎng)景廣泛，包括視頻內(nèi)容翻譯、定制角色對(duì)話更改和個(gè)性化定制等。例如，品牌在不同市場(chǎng)可能使用不同的產(chǎn)品名稱。如果他們想拍攝廣告并更改特定產(chǎn)品的名稱，那么LipDub將是理想的選擇。該技術(shù)還適用于計(jì)算機(jī)生成（CG）角色，不僅限于唇部同步，更注重角色的動(dòng)態(tài)表達(dá)和情感傳遞。

目前，這款應(yīng)用仍處于測(cè)試階段，預(yù)計(jì)將于2025年1月20日正式面向公眾開(kāi)放。除了廣告和電子學(xué)習(xí)等領(lǐng)域外，布朗夫曼更傾向于根據(jù)用戶對(duì)質(zhì)量的關(guān)注度來(lái)劃分應(yīng)用場(chǎng)景?！拔覀冴P(guān)注的是那些注重質(zhì)量的人，他們將繼續(xù)是我們的北極星?！彼f(shuō)道，“我們將為他們提供服務(wù)?！?/p>

布朗夫曼指出，人工智能正處于一個(gè)轉(zhuǎn)折點(diǎn)?！叭藗冋谙蜻@一領(lǐng)域投入大量資金。他們希望更快、更實(shí)惠地……看到在給定市場(chǎng)或行業(yè)中推廣或吸引觀眾的最有效、最積極的方式?！彼J(rèn)為，人工智能正是解決視頻和電影制作行業(yè)高昂成本這一長(zhǎng)期問(wèn)題的關(guān)鍵。盡管目前視頻制作仍然緩慢且昂貴，但布朗夫曼給出了解決方案：“借助LipDub，你可以重用視頻，并在幾分鐘內(nèi)實(shí)現(xiàn)內(nèi)容全球化。”