語種隨意換口型無破綻AI視頻工具HeyGen“走紅”網(wǎng)絡(luò)
近日,歐美頂流歌手泰勒·斯威夫特操著一口流利中文的視頻在各大社交平臺上廣泛傳播。不止如此,說中文的埃瑪·沃森,以及說著英語的蔡明的視頻也頻頻“出圈”。
據(jù)了解,這些視頻都使用了AI視頻工具HeyGen。創(chuàng)作者只需要上傳視頻并選擇要翻譯的語言,該工具可實(shí)現(xiàn)自動翻譯、調(diào)整音色、匹配嘴型。令人稱贊的是,這個火到國外的“神器”是國內(nèi)誕生的產(chǎn)品,背后公司是來自深圳的AI公司詩云科技。
為視頻創(chuàng)作者打造的工具
網(wǎng)友稱HeyGen為“沒有譯制片腔調(diào)的翻譯”,表示真人配音都達(dá)不到這樣的效果,甚至比真人配音還要省事得多。據(jù)悉,詩云科技成立于2020年11月,主營AIGC,從官網(wǎng)看,其產(chǎn)品除了視頻翻譯,也有數(shù)字頭像生成、AI腳本生成等服務(wù)。想獲得一個翻譯過的真人視頻,只需上傳原視頻,再選擇要翻譯的語言就能輕松完成。
HeyGen是為視頻創(chuàng)作者打造的工具,翻譯功能并非其全部。圍繞視頻創(chuàng)作,HeyGen的功能十分強(qiáng)大,包括主播換臉、文字轉(zhuǎn)口播視頻、創(chuàng)建虛擬主播、語音克隆等。
數(shù)字人創(chuàng)建是其主推的功能。據(jù)HeyGen介紹,即使沒有攝像機(jī)、攝影棚和演員,普通人也可以通過該工具制作視頻。用戶只需上傳一段2分鐘的小視頻,就能制作一個和真人一樣的數(shù)字人,即使是像手勢、面容和口型這種“細(xì)微肢體語言”也能調(diào)整。
記者了解到,現(xiàn)在市場上的AI視頻應(yīng)用比較多,比如抖音旗下的剪映,目前也有AI能力,具體是把腳本輸入到里面,能生成視頻。另外,百度也有AI應(yīng)用,把腳本輸入到對話框里就可以生成視頻。
作為該賽道的佼佼者,天眼查數(shù)據(jù)顯示,詩云科技已完成兩輪融資,獲得了來自IDG、紅杉中國、真格基金累計近千萬元的投資。
AI視頻領(lǐng)域應(yīng)用成關(guān)注焦點(diǎn)
目前,短視頻已得到大眾廣泛關(guān)注,而愈加火熱的AI在視頻領(lǐng)域的應(yīng)用,也成為關(guān)注的焦點(diǎn)。
以快手為例,今年下半年以來,快手加快AIGC的布局。8月,快手宣布內(nèi)測自研大語言模型“快意”(KwaiYii),打造“全模態(tài)大模型AIGC解決方案”。基于自研的基座大模型,為用戶提供包括文本生成、圖像生成、3D素材生成、音頻生成、視頻生成等在內(nèi)的多種技術(shù)能力。其中,KwaiYii-13B在多個Benchmark上都處于領(lǐng)先水平,證明了其在自然語言處理任務(wù)中的出色性能。
據(jù)了解,對于文生視頻應(yīng)用,用戶主要關(guān)注視頻生成質(zhì)量、是否可定制化生成特定內(nèi)容(如特定風(fēng)格、可對生成內(nèi)容調(diào)整細(xì)節(jié))、使用簡易程度等。盡管當(dāng)前已有可公測的應(yīng)用,但由于生成結(jié)果粗糙等問題,文生視頻并未在實(shí)際的媒體內(nèi)容生成、創(chuàng)意制作領(lǐng)域得到廣泛應(yīng)用。
相關(guān)專家表示,生成式AI的進(jìn)步,極大簡化了視頻制作的流程,在已經(jīng)到來的智能時代,受眾已經(jīng)不想再看到那些批量的、流水線式的“低劣”視頻。要想摘掉“低劣”的標(biāo)簽,真正讓作品具有感情和靈魂,除了“降本”之外,在個性化、擬真度、素材豐富性方面,國產(chǎn)視頻AI還有很長的路要走。
(文章來源:深圳商報)
- 免責(zé)聲明
- 本文所包含的觀點(diǎn)僅代表作者個人看法,不代表新火種的觀點(diǎn)。在新火種上獲取的所有信息均不應(yīng)被視為投資建議。新火種對本文可能提及或鏈接的任何項目不表示認(rèn)可。 交易和投資涉及高風(fēng)險,讀者在采取與本文內(nèi)容相關(guān)的任何行動之前,請務(wù)必進(jìn)行充分的盡職調(diào)查。最終的決策應(yīng)該基于您自己的獨(dú)立判斷。新火種不對因依賴本文觀點(diǎn)而產(chǎn)生的任何金錢損失負(fù)任何責(zé)任。