
寫在最開始:以下僅是個(gè)人愛好,僅是學(xué)習(xí)使用,不用于任何商業(yè)用途!我們一定要支持正版,切勿做盜取他人知識(shí)產(chǎn)權(quán)違規(guī)犯法的事情!?。?/h4>
我,一不小心搞了一個(gè)自己的“妙鴨”,事情還要在我發(fā)現(xiàn)妙鴨APP開始(其實(shí)也就是上周啦),因?yàn)槲姨闷媪?,即使我相?cè)湊不夠20張圖,即使9.9元付費(fèi)(說真的哪怕收費(fèi)29.9元,我這好奇心害死貓的心態(tài)也會(huì)付費(fèi)試一試),然后就一發(fā)不可收拾了!??!
先來給不知道妙鴨的人說一下,我理解的妙鴨是一款私人定制寫真類型的APP,用戶上傳自己的20張圖片,APP會(huì)根據(jù)用戶的肖像生成定制的數(shù)字人,然后就可以生成各種場景模板的“藝術(shù)寫真”(參考官方圖)

咱們按照步驟來,我先上傳了20張我的照片(好不容易找的圖,為什么這里只展示了18張呢,是因?yàn)槲覍?shí)在忘記還差哪兩張了),這些圖高矮胖瘦的都是我,沒有照片婚紗照湊,和我老公是合影把他裁掉,有一些都是我高度P過的(我的大方臉恨不得P成錐子臉),就是這樣平平無奇的20張圖:

然后我就開始了拼命生成圖、生成圖、生成圖

正在我瘋狂出圖的瞬間,我反應(yīng)過來,不對(duì)呀,我自己不就是一個(gè)圖像算法工程師嘛,我也得開搞,說搞就搞!同樣這20張圖:
- 先去C站找了一個(gè)人物寫實(shí)的大模型;
- 在此基礎(chǔ)上用這20張圖訓(xùn)練了一個(gè)自己的lora,起名就叫myself(就是這么簡單粗暴);
- 想要快速出圖,只能先借用妙鴨的模特用一用了,直接把模特截圖作為我image-to-image的模板,先反推出提示詞;
- image-to-image,輸入提示詞,重繪幅度0.5,選擇基礎(chǔ)大模型,選擇我的Lora: myself,按照我XY推理出來的最佳參數(shù)設(shè)置;
- 后處理:Real-ESRGAN超分+GFPGAN(小修一下人臉,人臉修復(fù)參數(shù)要小,GFPGAN用來處理高壓縮、噪聲、模糊的人臉效果好,對(duì)于本身人臉就清晰的,就小修一下,參數(shù)小一點(diǎn),參數(shù)大了生成的人臉容易不像自己了)
多說無益,直接看效果(為了輸出妙鴨的高清圖,我又花了4顆鉆石,心疼疼):


因?yàn)槲彝稒C(jī)取巧嘛,直接和原始模板是一樣的造型,只是換了我的臉,中間妙鴨這個(gè)我已經(jīng)點(diǎn)了好幾次再像我一點(diǎn)了,但是確實(shí)我自己覺得還是一些些不像。我可太喜歡我生成的我的證件照了,這張證件照我已經(jīng)讓它轉(zhuǎn)正了!??!
再給大家看一組圖,妙鴨對(duì)我的牙齒總是做不好,我使用myself的lora進(jìn)行了臉部調(diào)整,一方面長相更加像我,另一方面我覺得細(xì)節(jié)更加豐富了:

至此我找到了不用再拍照也依然美美噠的方法,當(dāng)然擺脫妙鴨模板,我可以自己生成模板呀,先文生圖生成一個(gè)我想要的模板,比如七夕當(dāng)天,我輸入了:女孩,紅玫瑰,半身照,面向鏡頭,純色虛化背景,白色T恤,高畫質(zhì),寫真,然后文生圖生成了模板,直接給出對(duì)比圖

回過頭來,這里面可以操作的地方太多了,比如:
- 訓(xùn)練之前可以預(yù)處理,磨皮、美顏、瘦臉搞一搞,淡妝搞一搞,濾鏡搞一搞,讓訓(xùn)練樣本就又像自己又漂亮;
- 處理完后處理,基本的高清放大,人臉修復(fù),還可以自動(dòng)匹配假睫毛啊,眼線啊,淡妝啊這些可以讓生成人像更加有氣質(zhì);還可以加一些提高氛圍感的濾鏡,或者有對(duì)應(yīng)的lora也可以;
- 兩個(gè)設(shè)計(jì)兩個(gè)分身,設(shè)計(jì)雙人模板(閨蜜照、結(jié)婚證件照),然后可以設(shè)計(jì)lora分區(qū)編輯,男性lora1,女性lora2,或者左邊任務(wù)lora1,右邊人物lora2這樣的;
- 提前訓(xùn)練好背景l(fā)ora,或者造型lora,結(jié)合人臉lora一起使用,比如天使、魔鬼、花仙子啊;
當(dāng)然了我這種直接使用模板的行為不可取?。?!但是有一個(gè)模板進(jìn)行引導(dǎo)真的好用而且好控制(關(guān)于模板引導(dǎo),我真有一個(gè)好主意,打算下一篇文講,嘿嘿),如果讓生成的內(nèi)容盡可能不和模板這么相似只是姿態(tài)形似,可以使用controlnet搭配一下,比如openpose啊,HED邊緣檢測啊,人臉關(guān)鍵點(diǎn)啊這些控制一下姿勢(shì),然后重繪幅度就可以再開大一點(diǎn)了。