DeepFaceLab 近期更新概要衙解,“整臉”來襲!

2020年2月3號之后鸥跟,Iperov同志沉浸了一小段時間丢郊。不過,沒多久又進入了瘋狂更新的狀態(tài)医咨。目前已經(jīng)發(fā)布了28號(今天)的版本枫匾。

我這里先拎幾個重點。

1. 修復眼神詭異或者亂飄的問題拟淮。

使用DFL2后干茉,不少人發(fā)現(xiàn)眼神上的問題,具體的體現(xiàn)有眼神完全不同步(當然有些人是素材不夠)很泊,還有一種是眼神很詭異角虫,感覺變異了一樣。

針對這兩種情況委造,軟件進行了改進戳鹅。具體有多大改善,還有待觀察昏兆。

2. AI換臉+AE特效的“整臉”模型

繼半臉枫虏,全臉,中臉爬虱,之后又添加了新的一種臉型Whole_Face隶债,這個其實可以簡稱為“全臉” ,但是因為之前已經(jīng)有一種FUll_FACE , 為了區(qū)別我覺得翻譯成“整臉” 比較好跑筝。這個類型死讹,最大的功能就是解決額頭的問題。

但是…這是一個半成品曲梗,需要結(jié)合AE才能做出完整的效果赞警。簡略教程參見上圖,具體使用方法虏两,可以關(guān)注后續(xù)文章愧旦。

3. 256提升到512。

因為出了全臉之后碘举,引發(fā)的蝴蝶效應忘瓦。原先我們提取的圖片都是256×256像素搁廓,現(xiàn)在因為需要處理整個臉部引颈,所以提升了頭像尺寸耕皮,擴到了512×512。同時把訓練模型像素的最大值也改到了512(32G,V100聽完后瑟瑟發(fā)抖蝙场,說了句:告辭)凌停。 雖然多個地方的size都改大了,但是并不意味著你的顯卡能跑出更好的效果…

還有安裝包是越來越大了…

最近三次更新的主要內(nèi)容應該就是這些了售滤,具體更新記錄如下:

2020年2月28日

Extractor:

提取

image size for all faces is now 512

提取的圖片尺寸從256提升到512

fix RuntimeWarning during the extraction process

修復提取過程中出現(xiàn)RuntimeWarning的問題罚拟。

SAEHD:

max resolution is now 512

模型參數(shù)中,最高像素改成512(32G V100同樣表示玩不起)

fix hd arhitectures. Some decoder’s weights haven’t trained before.

修復HD架構(gòu)完箩,之前一些解碼器權(quán)重沒有被訓練到赐俗。

new optimized training:

新的優(yōu)化訓練

for every <batch_size*16> samples,

對于每個<batch_size*16>樣本,

model collects <batch_size> samples with the highest error and learns them again

模型收集誤差比較大的樣例進行重新學習弊知。

therefore hard samples will be trained more often

因此阻逮,比較難的樣本被訓的更狠。

‘models_opt_on_gpu’ option is now available for multigpus (before only for 1 gpu)

“models_opt_on_gpu”選項現(xiàn)在可用于多顯卡(以前僅用單顯卡)

fix ‘a(chǎn)utobackup_hour’

修復“自動備份時間”

2020年2月23日

SAEHD: pretrain option is now available for whole_face type

SAEHD: 預訓練支持“整臉”

fix sort by abs difference

修復abs差異排序

fix sort by yaw/pitch/best for whole_face’s

修復整臉的yaw/pitch/best排序秩彤。

2020年2月21日

Trainer: decreased time of initialization

訓練:減少初始化時間

Merger: fixed some color flickering in overlay+rct mode

合成:修復overlay+rct模式下的一些閃縮的問題叔扼。

SAEHD:

added option Eyes priority (y/n)

添加眼部優(yōu)先選項

Helps to fix eye problems during training like “alien eyes”

有助于在訓練過程中解決“異形眼”

and wrong eyes direction ( especially on HD architectures )

和眼神不對的問題(尤其是在HD架構(gòu)上)

by forcing the neural network to train eyes with higher priority.

通過強制神經(jīng)網(wǎng)絡以更高的優(yōu)先級來訓練眼睛。

before/after https://i.imgur.com/YQHOuSR.jpg

之前/之后

added experimental face type ‘whole_face’

添加試驗性臉型“整臉”漫雷。

Basic usage instruction: https://i.imgur.com/w7LkId2.jpg

基本用法說明:

‘whole_face’ requires skill in Adobe After Effects.

整臉需要 AE技能

For using whole_face you have to extract whole_face’s by using

使用整臉你必須提取整臉圖片瓜富,通過以下兩個腳本。

4) data_src extract whole_face

and

5) data_dst extract whole_face

Images will be extracted in 512 resolution, so they can be used for regular full_face’s and half_face’s.

圖片會按512像素進行提取降盹。他們同樣也適用于常規(guī)的全臉和半臉与柑。

‘whole_face’ covers whole area of face include forehead in training square,

整臉涵蓋臉部的整個區(qū)域包含額頭。

but training mask is still ‘full_face’

但是訓練遮罩依舊是全臉

therefore it requires manual final masking and composing in Adobe After Effects.

因此需要你通過AE手動遮罩和合成澎现。

added option ‘masked_training’

添加遮罩訓練

This option is available only for ‘whole_face’ type.

這個選項僅適用于整臉

Default is ON.

默認開啟

Masked training clips training area to full_face mask,

遮罩訓練可以把訓練區(qū)域剪輯到全臉遮罩仅胞。

thus network will train the faces properly.

這樣網(wǎng)絡就可以正確訓練臉部

When the face is trained enough, disable this option to train all area of the frame.

當訓練足夠多的時候,關(guān)閉這個選項剑辫,讓網(wǎng)絡去訓練所有區(qū)域干旧。

Merge with ‘raw-rgb’ mode, then use Adobe After Effects to manually mask, tune color, and compose whole face include forehead.

使用Raw-rgb模式合成,然后使用AE手動遮罩調(diào)整顏色妹蔽,然后合成椎眯,這樣額頭也能被換掉。

更多更新內(nèi)容請看:https://www.deepfaker.xyz/?page_id=1604

最新版見672316851群文件胳岂,據(jù)說轉(zhuǎn)發(fā)一下可以極速下載哦编整!

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市乳丰,隨后出現(xiàn)的幾起案子掌测,更是在濱河造成了極大的恐慌,老刑警劉巖产园,帶你破解...
    沈念sama閱讀 219,366評論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件汞斧,死亡現(xiàn)場離奇詭異夜郁,居然都是意外死亡,警方通過查閱死者的電腦和手機粘勒,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,521評論 3 395
  • 文/潘曉璐 我一進店門竞端,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人庙睡,你說我怎么就攤上這事事富。” “怎么了乘陪?”我有些...
    開封第一講書人閱讀 165,689評論 0 356
  • 文/不壞的土叔 我叫張陵统台,是天一觀的道長。 經(jīng)常有香客問我啡邑,道長饺谬,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,925評論 1 295
  • 正文 為了忘掉前任谣拣,我火速辦了婚禮募寨,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘森缠。我一直安慰自己拔鹰,他們只是感情好,可當我...
    茶點故事閱讀 67,942評論 6 392
  • 文/花漫 我一把揭開白布贵涵。 她就那樣靜靜地躺著列肢,像睡著了一般。 火紅的嫁衣襯著肌膚如雪宾茂。 梳的紋絲不亂的頭發(fā)上瓷马,一...
    開封第一講書人閱讀 51,727評論 1 305
  • 那天馋记,我揣著相機與錄音厉斟,去河邊找鬼。 笑死员淫,一個胖子當著我的面吹牛端盆,可吹牛的內(nèi)容都是我干的怀骤。 我是一名探鬼主播,決...
    沈念sama閱讀 40,447評論 3 420
  • 文/蒼蘭香墨 我猛地睜開眼焕妙,長吁一口氣:“原來是場噩夢啊……” “哼蒋伦!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起焚鹊,我...
    開封第一講書人閱讀 39,349評論 0 276
  • 序言:老撾萬榮一對情侶失蹤痕届,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體研叫,經(jīng)...
    沈念sama閱讀 45,820評論 1 317
  • 正文 獨居荒郊野嶺守林人離奇死亡势决,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,990評論 3 337
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了蓝撇。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 40,127評論 1 351
  • 序言:一個原本活蹦亂跳的男人離奇死亡陈莽,死狀恐怖渤昌,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情走搁,我是刑警寧澤独柑,帶...
    沈念sama閱讀 35,812評論 5 346
  • 正文 年R本政府宣布,位于F島的核電站私植,受9級特大地震影響忌栅,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜曲稼,卻給世界環(huán)境...
    茶點故事閱讀 41,471評論 3 331
  • 文/蒙蒙 一索绪、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧贫悄,春花似錦瑞驱、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,017評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至鸭津,卻和暖如春彤侍,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背逆趋。 一陣腳步聲響...
    開封第一講書人閱讀 33,142評論 1 272
  • 我被黑心中介騙來泰國打工盏阶, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人闻书。 一個月前我還...
    沈念sama閱讀 48,388評論 3 373
  • 正文 我出身青樓般哼,卻偏偏與公主長得像,于是被迫代替她去往敵國和親惠窄。 傳聞我的和親對象是個殘疾皇子蒸眠,可洞房花燭夜當晚...
    茶點故事閱讀 45,066評論 2 355

推薦閱讀更多精彩內(nèi)容