学习DF架构换脸原理后想到一个场景: 训练过程(已经知道嫌疑人长相的情况): 目击者(编码器)描述嫌疑犯,刑侦专家(解码器)根据描述开始作画。
作画后会比对嫌疑犯长相,比对偏差了多少(loss 值)。
然后刑侦专家用电棍/普通警棍抽目击者让其调整描述(反向传播)。
如果用电棍抽,目击者会更多的修改描述,可能会改的太多偏差过大。(学习率过大)。
一轮训练完成,然后不断重复,等到比较接近嫌疑犯的时候,改用普通警棍。(学习率下调)
如此反复,目击者挨了很多轮次的毒打后,描述会逐渐逼近嫌疑犯,同时画师的水准也在上升 解码器 A 和解码器 B 可以理解为画风不同的刑侦专家,能力不同。 刑侦专家 B,即不管画谁都像 B 的水平一般的刑侦专家。(或者诚心要害死 B ) 换脸过程:目击者提供 A 的描述,刑侦专家 B 画出了 B