1逗栽、給定兩幀的關(guān)節(jié)點(diǎn)位置信息盖袭,學(xué)習(xí)到類似光流的轉(zhuǎn)換,應(yīng)用到第一幀的圖像上彼宠,生成下一幀鳄虱?
2、身份信息并沒(méi)有保留凭峡?
生成過(guò)程:通過(guò)合理地表示生成的意圖控制生成過(guò)程拙已。
條件圖像生成框架:相關(guān)工作,條件一個(gè)推薦圖像和指定人臉的視角摧冀,生成該視角的人臉倍踪。(圖像旋轉(zhuǎn))
失敗案例:(生成圖片有人工痕跡系宫,用圖像梯度loss會(huì)不會(huì)好一些。很明顯不再是一個(gè)id)
1建车、輸入圖像紋理過(guò)于豐富
2扩借、姿態(tài)變化很大
可挖掘的地方:
1、pose mask 用于構(gòu)建前景和背景
2缤至、生成圖像時(shí)條件圖像的姿態(tài)信息沒(méi)有挖掘潮罪。
3、模型沒(méi)有對(duì)姿態(tài)變化顯示建模领斥,沒(méi)有體現(xiàn)變化這個(gè)特征嫉到。
可改進(jìn)的地方:
模型G1的encoder可以改進(jìn)鸯绿。
姿態(tài)作為條件改為3D body 作為條件魄藕。