實戰(zhàn)案例!如何用ComfyUI給模特換服裝?
一、前言
當(dāng)你從這么多高含金量的內(nèi)容里面找到這我這篇,我相信你肯定不是單純的為了工作,很好!
技術(shù)的迭代其核心驅(qū)動一定是興趣,而不僅僅是為了去打工!
在工作之余,給你身邊的小姐姐,小哥哥們提供適當(dāng)?shù)那榫w價值,回報一定會超乎你的想象。
當(dāng)然,今天分享的,純粹是技術(shù)實現(xiàn)路徑,審美這塊,我相信你肯定比我強。(在多年的甲方教育下,審美已經(jīng)不存在了)
閑話就說到這里,開整!
二、模特換服裝和場景1. 不一樣的攝影需求
為什么要做這個事?
在學(xué)習(xí)開始之前,整明白這個事,可以很好的幫你做好心理建設(shè),拉高你的預(yù)期,
這樣在遇到困難的時候,你沒有這么容易放棄!
①無論你今天是什么職業(yè),都會遇到在你給對象拍完照片之后,得不到正向反饋的時候,尤其他/她,還是個外行。(被外行質(zhì)疑你的專業(yè),甚至是賴以維生的拉磨技能的時候,比拉磨還要難受)
那么,本課程,可以很好的幫你環(huán)節(jié)以上癥狀:拿他/她滿意的照片,生成他/她滿意的風(fēng)格作品。
②一些挑剔的甲方,往往在不知道自己要什么的時候,百般對你刁難(為難你不是你的問題,是對方的問題)
但是,當(dāng)你把一百種風(fēng)格的作品,以一個壓縮包的形式甩個對方的時候,相信我,這個癥狀完全可以改善。
更多的好處,我就不一一陳述了,開動你的腦瓜,能想到更多
2. 前期準(zhǔn)備
前期模型節(jié)點我們需要安裝好:
大模型:maijicmixRealistic_v6、YamersRealistic_v5Rundiffusion(你根據(jù)自己的需求選擇自己喜歡的)Lora:abel 五彩斑斕的(古風(fēng))_0.1(也可根據(jù)自己的需求選擇自己喜歡的,或者甲方喜歡的)插件:加載我們提供的工作流,根據(jù)提示安裝缺失的自定義節(jié)點(安裝方法如圖所示)前期素材我們需要準(zhǔn)備好,模特圖片避免以下問題:
前期提示詞我們需要準(zhǔn)備好。
3. 節(jié)點工作流
通過 openpose+風(fēng)格 lora 生成圖片 → 把生成的圖片與原模特的臉型進行調(diào)整 → 把生成的圖片與原模特進行臉部替換 → 融合臉部細節(jié) → 高清放大
第一步:Group Style 圖片風(fēng)格化
①上傳模特圖片(這里我是拿 mj 跑的,用作教學(xué)演示,不涉及侵權(quán)),并固定圖片尺寸,使得原圖片不會過大或過小影響后面生成效果,同時檢測模特的手部、身體、臉部,并且添加 openpose 和 depth 來控制生成圖片的姿勢與原圖保持一致。
②添加喜歡的風(fēng)格 Lora,并輸入關(guān)鍵詞(如下),我這里使用的 Lora 是來自里布的 abel 五彩斑斕的(古風(fēng))_0.1
網(wǎng)址(僅學(xué)習(xí)使用,不可商用)
另外還使用了 ip-adapter,主要解決的是有時候生成的圖片與原圖膚色差異過大,方便后面的臉部微調(diào)。
正向提示詞:
Masterpiece,best quality,super details,intricate details,realistic,photography,
1girl\(Eyes\(Deep amber,crystal clear,long and delicate eyelashes\),Nose\(Elevated,a slightly upturned nose tip\),Lips\(Rosy color,defined lip line\),Hairstyle\(Black hair,smooth and shiny,slightly wavy at the ends\),Skin\(Fair,blemish-free,as delicate as porcelain\),Clothing\((gold long feathered dress,intricate floral filigree,gorgeous):1.5,walking,(look at viewer,floating hair,outdoor,upper body):1.53\), Background\((full moon,grassland):1.5,sky,forest,lake\),light on face,
反向提示詞:
White clothes,paintings,sketches,(worst quality:2),(low quality:2),(normal quality:2),dot,mole,lowres,normal quality,monochrome,grayscale,lowres,text,error,cropped,worst quality,low quality,jpeg artifacts,ugly,duplicate,morbid,mutilated,out of frame,extra fingers,mutated hands,poorly drawn hands,poorly drawn face,mutation,deformed,blurry,dehydrated,bad anatomy,bad proportions,extra limbs,cloned face,disfigured,gross proportions,malformed limbs,missing arms,missing legs,extra arms,extra legs,fused fingers,too many fingers,long neck,username,watermark,signature,(mole:1.4),NSFW,watermark,
第二步:臉型修復(fù)
這一步是通過臉部 mask 后再用 lineart 控制原圖臉型,使得臉型一致(這一步做不好,后面做的再好也沒卵用,除非你的口才特別好)
我們可以對比以下臉型修復(fù)后與之前生成圖片的對比,效果還是不錯的
第三步:摳出臉部
這一步是把生成的圖片和原圖的臉部都摳出,為下一步融合做準(zhǔn)備。
這里我們使用了 FaceMesh,他可以精準(zhǔn)控制頭部,如果你想控制眉毛、嘴巴、眼睛、瞳孔等,也可以打開相關(guān)選項,我這里只打開了臉部控制選項。
摳出來的圖片如果直接進行融合,很容易在臉部邊緣產(chǎn)生鋸齒狀,導(dǎo)致人物融合的假面感,所以我們在這一步增加了一個蒙版邊緣羽化的過程。
第四步:臉部細節(jié)融合
①把原圖和生成的圖的 mask 臉部內(nèi)容進行融合,增加一個 ColorAdapter 使兩者的膚色融合。
②得到的圖片進行高清放大,并且增加一些皮膚的質(zhì)感,增強真實感。
第五步:Group 2x
最后我們就是把臉縮放進完整的畫面就結(jié)束啦!
如果這一步的臉部和脖子的膚色有差異,可以在 color factor 里調(diào)整一下。
如上一步的 color factor 參數(shù)是 0,整體融合不錯,但當(dāng)我調(diào)整到 1 時,臉部就會太白了。
怎么樣,大家應(yīng)該都會了吧
還不會的話,建議你找找自己的原因。
三、總結(jié)前期工作準(zhǔn)備好了,操作不難,工作流的話,你想辦法找到我,只要你能找到,我就給你,for free。comfy ui 我們也在某三方顯卡租賃平臺(我就不打廣告了),準(zhǔn)備好了云上的環(huán)境,老規(guī)矩,找我拿到工作流,你電腦能上網(wǎng)就能跑。本教程詳細介紹了如何使用 ComfyUI 實現(xiàn)模特換服裝和場景,通過本次學(xué)習(xí),大家可以輕松掌握該工作流的思路和邏輯,提高工作效率關(guān)注我,下期見!- 免責(zé)聲明
- 本文所包含的觀點僅代表作者個人看法,不代表新火種的觀點。在新火種上獲取的所有信息均不應(yīng)被視為投資建議。新火種對本文可能提及或鏈接的任何項目不表示認(rèn)可。 交易和投資涉及高風(fēng)險,讀者在采取與本文內(nèi)容相關(guān)的任何行動之前,請務(wù)必進行充分的盡職調(diào)查。最終的決策應(yīng)該基于您自己的獨立判斷。新火種不對因依賴本文觀點而產(chǎn)生的任何金錢損失負任何責(zé)任。