开GAN后炸丹(出现色块)拯救方案

ikenlon

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:5  参与人数:3  我的评分:未评

这段时间开gan前前后后跑了快100W次，发现了很多问题，其中最蛋疼的就是炸丹，如下图：


这个色块出现的时机是固定的，只在脸部有蓝色绿的光影效果的时候就会出现，其他时候并不会出现，本身我准备启用备份，删除这个模型，但是发现距离上次备份有10W次的数差，有点舍不得，然后就开始分析原因
①开打模型参数文本分析

②经过多次尝试发现解决方法如下：打开色彩转移模式为RCT，关闭DST,SRC随机翻转，打开模糊遮罩，关闭GAN为0.0
③跑了大概10分钟，刷新预览图发现色块已经消失，此时，大概迭代了300次左右，随后，继续跑了1000次
④保存模型后，重新开启之前关闭的参数，然后从晚上23:30分跑到第二天上午8:00打开显示器，刷新预览图，刷新了约10分钟，没有再出现色块，

⑤我将SRC更换后，也没出现过色块了

总结：如果发现GAN后出现问题：
A:关闭GAN
B:更换色彩转移模式,
C:关闭SRC，DST随机翻转 ，
D:模糊遮罩功能最好也开启，
E:训练一段时间后，刷新预览图，等待色块消失
F:保存模型，然后还原原来的参数




关于GAN一些经验：
①GAN的出细节能力是可以复用到新SRC的，并且速度非常之快，眉毛纹理，脸部纹理，一般500次就出，前提是你的模型已经跑出这些细节后才有效果
②GAN对于SRC素材的质量有极高的要求，我炸丹的原因大部分是因为SRC素材remini或gpen强化过导致的，强化过的图片会发生脸部逻辑混乱，比如，你有清晰的牙齿，不清晰的图片采用强化手段就会脑补，出来的牙齿逻辑和源人物的就不匹配，导致一系列问题，如：下排牙齿非常难出(下排牙齿逻辑非常容易混乱)，脸部的痣，疤痕等细节出不来
③GAN出好的效果的前提还是在最重要的一点：SRC素材质量！！！
④什么是最好的SRC素材，不是你在网上随便凑一些高清图，细节图就行的，这些图妆容不统一，细节不统一，就算开gan 也是出不来效果，好的SRC应该是在同一个空间内，同一时间的光照条件下拍摄的高清近距离图片或视频，并且角度齐全，上下牙齿素材充足，还有其他的表情等
⑤什么时候开GAN ，GAN就好像是烧菜的调料 ，你炒菜菜没熟你会放调料吗？就算没熟就放，还好吃吗？所以正确的做法，是你用好的食材(SRC)+好的火候(硬件)+好的厨艺(丰富的经验)+中途调味料(随机扭曲，大角度训练等)。最后，上菜是加上最后一个调味料：盐&味精 (开GAN)，这样才是最好的效果，
步骤就是:
①准备好的SRC
②好的，匹配的模型参数
③合适的硬件
④各个时期调整各种参数的把控
⑤开启GAN，收尾
⑥我觉得GAN的最大意义在于做专人专丹，所有角度，效果，细节全部出了，最后，开GAN跑出细节，模型停止训练，最后用了直接导出视频(类似滚石论坛的那些专人专丹)




结束，感谢您的阅读。希望对您有所帮助。

wxq121015

这个好，我上次也是炸了，脸上有影子，直接删了，后悔了

dsyrock

我觉得你的变量一下子有点多了，可能实际起作用的就是一两个参数，很可能就是rct

ikenlon

dsyrock 发表于 2021-12-31 10:29
我觉得你的变量一下子有点多了，可能实际起作用的就是一两个参数，很可能就是rct ...

只RCT不行，我测试过各个参数，但是这个炸丹因人而易，说不定有个换个色彩模式就好了

似曾相识

学习了。

wcw888

感谢分享技术贴

王金龙5888

多谢分享

王金龙5888

多谢分享

王金龙5888

多谢分享

2772403575

感谢分享，马住了