1. 程式人生 > >生成模型--TP-GAN

生成模型--TP-GAN

TP-GAN

  中科院自動化所(CASIA),中科院大學和南昌大學的一項合作研究,提出了雙路徑 GAN(TP-GAN),通過單一側面照片合成正面人臉影象,取得了當前較好的結果。
  這裡採用雙通道網路,Two Pathway Generator,一個是 local pathway,另一個是 global pathway。
  1)local pathway 用於解決人臉的細節問題,輸入側臉的四個特徵影象塊:分別是 兩個眼睛、鼻子、嘴巴。輸出正臉的對應四個影象塊。
  2)global pathway 用於生產人臉大的結構,缺少細節,輸入完整的側臉影象輸出完整的模糊的正臉影象。
  3)這兩個特徵圖會融合在一起,用於接下來的最終合成。