关于Gan训练的小经验分享！

GCF1114383179

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:3.5  参与人数:2  我的评分:未评

大家好！我也是第一次分享我的经验 有不对的地方大家多包涵！
第一  Gan的训练 就是针对细节的二次重塑！（比如眉毛细节，牙齿缝隙，发际线）
         训练初期会出现突然变色，突然变颗粒状态，突然变线条状态。这些都不用担心，过一会儿能变回来！
         随着这些变化，los数值也会随着巨幅变化！会达到1.5左右。
第二  Gan的训练需要循序渐进！
         我是从 0.01开始跑一天的训练，第一天能明显发现细节出来了，但牙齿还是不规则形态。第二天开始跑0.02跑完其实没啥变化。
         这两天其实就是为了打个基础。两天我也就训练了20个小时左右，迭代次数也就10万次左右。
         第三天是重头戏Gan 0.1  这天会出现崩丹的可能！要提前做好备份。蹦丹也没有预兆！就是突然第二列和最后一轮变成黑色的了。
         如果Gan 0.1蹦了 咱们就继续降为Gan 0.05 继续训练一天。如果还蹦 就继续降数值。找一个适合你显卡的数值就好。
第三  Gan的训练不是必须的。只是看细节的需要程度
         如果大家没有什么特别高清的特写呀，也没有什么必要。

以上呢，就是我对Gan的训练经验。对于大家说的开真脸这种操作我还没有操作过，如果大家相似经验心得也请大家在下面留言分享！！！

8-11日 经验分享
经过两个月的摸索 现在再次分享一下几个大家关注的问题
第一  是否复用他人神丹
      如果你是复用别人的神丹 开Gan训练前 一定要先开随机扭曲训练你自己的src至少迭代10万次左右。（让神丹先学会画你自己的src）
第二 随机扭曲 Enable random warp of samples ( y/n ?:help )。
       随机扭曲和Gan同时开会出现巨大的画面波动 比如出现斜线条 若Gan数值过大就会直接蹦丹。
       这个问题可以理解为 你让神丹一遍画细节一遍让他把大体轮廓变形的更像src的时候
       他只能一遍拉扯结构一边画细节就出现了斜拉线 如果Gan数值过大就出现了 五颜六色的斑块（就是细节被扭曲拉扯放大到不可恢复）
        Gan训练时 建议关闭随机扭曲
第三  梯度剪裁 Enable gradient clipping ( y/n ?:help )
        梯度剪裁很好理解 就是进一步控制了Gan对细节的处理范围 不会因为一次画的太猛导致蹦丹
        Gan训练时  建议开启
第四  眼嘴优先 Eyes and mouth priority ( y/n ?:help )
        眼睛其实很好训练出来 就难的是牙齿和牙缝！这个就是时间的问题了 多增加src的露牙齿素材慢慢练
        本人开Gan0.1 训练牙齿训练了50万次能出大概的轮廓 但是细节还是不够好 合成的时候开超分细节还是不够好，还需继续训练。（不开Gan牙齿一定模糊不清）
        Gan训练时 建议开启 （毕竟开Gan就是为了训练牙齿的）




结论：Gan只是对牙齿 眉毛 睫毛这类细节有所提升 对大体结构和相似度并没有什么提升！
         如果你是要做高清海报这种图片 Gan训练对你来说是必须的。
         如果你只是换一个几分钟的片段而且也不是特写镜头 Gan对你来说一点意义也没有。


         本帖会持续分享 谢谢大家的支持！

haiou_f

谢谢分享，对于非高清视频觉得没必要用gan这个参数

whl716694

GCF1114383179 发表于 2021-6-20 16:11
我试过，开扭曲会脸型更像SRC 所以我降低Gan的参数保模型不崩溃。

所以你跑GAN的时候关不关闭扭曲人脸这个参数？

poiu88

经验心得

458198652

支持一下

gxhl119

感谢分享，学习了

judyhe

感谢分享

比昂

学习一下

比昂

竟然没有奖励

whl716694

老哥，我这图里GAN后面六项参数，你是怎么调的？还有这六项参数有没有必要设置，我是1070 8G显卡

517856628

学习到了 感谢分享

GCF1114383179

whl716694 发表于 2021-6-20 12:19
老哥，我这图里GAN后面六项参数，你是怎么调的？还有这六项参数有没有必要设置，我是1070 8G显卡
...

没有必要设置。默认的跑就好。但是不太建议10系显卡跑Gan 出效果慢。如果非要跑建议把显卡超频一下。