AI視頻/圖像如何精準(zhǔn)控制人物表情?快試試這4款神器!
大家好我是花生~
隨著生成式 AI 技術(shù)的發(fā)展,無論是 AI 圖片和視頻質(zhì)量都越來越好,可以輕松實現(xiàn)“以假亂真”。與此同時大家對細(xì)節(jié)把控的追求也在不斷提升,如何讓角色形象或場景保持一致、如何控制人物做出復(fù)雜連貫的動作、如何控制人物的面部表情等都是目前很受關(guān)注的問題。
今天就為大家推薦 4 款可以幫我們精準(zhǔn)控制人物頭部運動和表情變化的 AI 神器,有了它們,無論是讓圖像人物做出指定表情,還是讓 AI 視頻的角色表現(xiàn)出細(xì)膩的情緒都沒有問題,一起來看看吧~
相關(guān)推薦:
一、文本控制熟悉 AI 繪畫的小伙伴應(yīng)該都知道,我們可以直接通過文本生成帶不同表情的人物,所以現(xiàn)在很多 AI 視頻在表現(xiàn)人物情緒時,都會選擇先生成對應(yīng)的圖像,然后再添加動態(tài)。
目前 HaiLuo AI、Kling AI 等視頻生成工具在處理這一塊的動態(tài)時效果就很好,情緒傳遞非常到位。而且它們還可以根據(jù)提示詞的要求,讓原本的表情轉(zhuǎn)為另一種狀態(tài),從而在視頻中展現(xiàn)出豐富的情緒變化。
通過一張正面人物圖像,生成帶轉(zhuǎn)頭、微笑等表情的視頻。來源:Twitter @Dan_Dawson__
此外,這兩款 AI 工具本身的文生視頻能力也很強大,可以直接生成微笑、憤怒、憂傷、恐懼等的表情,甚至是不同情緒的混合和切換,大家在創(chuàng)作時可以多嘗試 AI 在情緒表達(dá)上的可能性。
Kling 1.5 模型直接通過文本生成復(fù)雜的人物情緒。來源:Twitter @CharaspowerAI
二、LivePortrait在線體驗: https://huggingface.co/spaces/KwaiVGI/LivePortrait
ComfyUI 插件: https://github.com/kijai/ComfyUI-LivePortraitKJ
Windows 一鍵安裝包: https://www./ai-video-7
Liveportrait 我之前已經(jīng)向大家介紹過了,它控制人物面部表情時效果準(zhǔn)確又自然,并且可控程度非常高,因此很推薦 AI 視頻創(chuàng)作者嘗試。作為一款開源模型,它可以部署到本地免費使用,ComfyUI 里也有對應(yīng)的插件,還可以在 Huggingface 上免費體驗。
使用時只需準(zhǔn)備好一張目標(biāo)角色的圖像,然后錄制一段表情動態(tài),LivePortrait 就能將其完美復(fù)刻到圖像角色臉上,操作簡單,同時效果也很貼合。現(xiàn)在已經(jīng)有人將其用驅(qū)動圖像角色“對嘴型”唱歌說話上了,用來制作一些搞笑整活視頻,效果也很有意思。LivePortrait 還支持對動物的表情進(jìn)行控制。
視頻來源:Twitter @HaruAiman
三、Advanced Liveportrait在線體驗: https://huggingface.co/spaces/fffiloni/expression-editor
ComfyUI 插件: https://github.com/PowerHouseMan/ComfyUI-AdvancedLivePortrait
在 Liveportrait 開源不久后,開源社區(qū)很快又出現(xiàn)了一款基于它修改而成的面部表情控制神器 Advanced Liveportrait, 它的特點是無需真人視頻,直接通過滑塊就能對面部動作進(jìn)行編輯調(diào)節(jié)。
下面是 ComfyUI 里 Advanced Liveportrait 插件的演示效果。它將面部表情可能包含的動態(tài)拆分為了 15 個滑塊,可以實現(xiàn)轉(zhuǎn)頭、偏頭、閉眼、單眨眼、眼珠轉(zhuǎn)動、微笑、嘴開合等操作。而且面部的一個部位發(fā)生改變后,其余部位的肌肉也會有對應(yīng)的變化,因此整體的效果非常自然。
Advanced Liveportrait 很適合用來生成 AI 寫真擺拍、或者拯救有瑕疵的廢片;也可以用來錄制頭部、表情的動作發(fā)生過程。
四、FacePoke在線體驗: https://huggingface.co/spaces/jbilcke-hf/FacePoke
FacePoke 是一款最近流行起來的面部動作控制工具,使用時要先用鼠標(biāo)選中角色的五官或者整個面部,然后拖動進(jìn)行調(diào)節(jié),它可以實現(xiàn)頭部轉(zhuǎn)動、眼睛開合、微笑等效果。需要注意的是,上傳的圖像中人物面部不要占比不能過大,半身照或者全身照比較好,否則模型會無法正確識別。
視頻來源:Twitter @DesigningFlow
五、綜合運用AI 創(chuàng)作者 @Martin Nebelong 在 Twitter 上發(fā)布了一個視頻,展示了自己是如何通過運用多個 AI 工具,完成一段帶有復(fù)雜人物動作的 AI 視頻的。整個視頻的效果精致,制作方式也很巧妙,這里也一起推薦大家。
Martin 首先是利用 AI 實時繪畫定制了一個原創(chuàng)角色,然后在 FacePoke 中通過鼠標(biāo)控制頭部進(jìn)行轉(zhuǎn)動,并錄制了整個過程。再用 LivePortrait 實現(xiàn)對口型的操作,最后利用 Runway Gen 3 的視頻轉(zhuǎn)繪功能,將原本簡單的視頻變成了氛圍感大片。
視頻創(chuàng)作過程中,Martin 充分利用了不同 AI 工具的長處,從而實現(xiàn)了單個工具難以實現(xiàn)的、非常接近實拍效果的人物動態(tài),思路非常值得借鑒。 喜歡 AI 視頻創(chuàng)作的小伙伴平時也可以多分析、思考不同工具的特點,靈活地結(jié)合使用它們,肯定能進(jìn)一步提升視頻的質(zhì)感。
那么以上就是本期為大家推薦的可以準(zhǔn)確控制人物面部表情的 AI 工具,喜歡的話一定記得點贊評論支持一波,我會更有動力分享新的 AI 干貨。想了解更多設(shè)計神器的話,歡迎關(guān)注網(wǎng) 神器推薦專欄 和微信視頻號,也歡迎大家掃描下方的二維碼加入“ AI 知識交流群”,和我及其他設(shè)計師一起交流學(xué)習(xí) AI 知識~
另外我的最新課程《AI 視頻零基礎(chǔ)系統(tǒng)入門》已經(jīng)上線了,可以幫你快速掌握目前 95% 人們 AI 視頻生成工具,對 AI 視頻感興趣的小伙伴不要錯過。課程內(nèi)容包括:
從文生視頻、圖生視頻、視頻生成視頻、數(shù)字人視頻 4 個方面,系統(tǒng)全面地帶你了解目前主流的 AI 視頻制作方式以及優(yōu)缺點;十余種熱門 AI 視頻生成神器用法詳解,輕松掌握大神同款工具;附贈課程專屬工具清單,收錄了近 300 款 AI 視頻、音頻、文案神器,全面賦能 AI 視頻創(chuàng)作高質(zhì)量免費自學(xué)資源、最新 AI 視頻資訊獲取渠道全分享推薦閱讀:
- 免責(zé)聲明
- 本文所包含的觀點僅代表作者個人看法,不代表新火種的觀點。在新火種上獲取的所有信息均不應(yīng)被視為投資建議。新火種對本文可能提及或鏈接的任何項目不表示認(rèn)可。 交易和投資涉及高風(fēng)險,讀者在采取與本文內(nèi)容相關(guān)的任何行動之前,請務(wù)必進(jìn)行充分的盡職調(diào)查。最終的決策應(yīng)該基于您自己的獨立判斷。新火種不對因依賴本文觀點而產(chǎn)生的任何金錢損失負(fù)任何責(zé)任。