求助，训练好的模型合成时脸上有明暗、颜色不均匀的情况

lifengze

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:NAN  参与人数:0  我的评分:未评

记得模型训练在开启真脸0.01、颜色转换rct、背景风格0.01和GAM0.01之前，脸的颜色匹配度还好，现在总是在某个角度出现脸上明暗、颜色，发灰，哪位大佬能告诉一下，是哪步出错了？还是哪步训练的时间不够么？底丹用的是600W次的，自己训练了100W。

正午

学习一下，等大佬解题

seancai110

会不会是你某个角度的src有问题？

z6163727

聽起來想是炸丹了  有沒有圖能看  是GAN  不是GAM吧

我的經驗 同一批的DST如果有很多不同明暗度  顏色之類的  很容易變成這樣
我的想法是，沒開那些功能前正常的，在DST有很多明暗度光影之類的半張臉被陰影覆蓋
開了那些之後AI為了效果要更像DST，加入了陰影之類的東西  
然後駕馭不了之類的   然後丹就炸掉，或是還沒成行還要做很久(大概那個意思)

所以如果光影不一  別一起練

come3002

楼主有没有训练预览图。合成作品 脸上 发灰的截图？


可能1：
发灰 有蓝色板块是炸丹了。
回到之前正常备份。


可能2：
DST 人脸 模糊
DST 动作快，导致人脸识别有误差。比如很多远古 樱花国 切 WF512 默认90 连续动作，会产生很多模糊的图片。
软件识别不对人脸位置。换脸就会失败。
解决方案：对模糊部分重新切脸 WF512，质量100%。查看debug，有必要的手动切脸。
并 用坛主人脸清晰化神器 ，对DST WF512 人脸清晰化处理。


可能3
SRC 缺少该角度的素材
dfl实质是图片转换软件。有SRC表情、角度才能完成换脸。SRC缺少角度，会导致换脸失败
建议
用刀哥 的角度软件看你的SRC角度图。尤其要看 DST 脸上发灰的 对应的角度是不少缺少素材。
找对应角度的新素材。


可能4.
此外，还要注意刘海遮挡
如果是DST头发 刘海部位有闪烁。
大概率是SRC、DST刘海问题。
建议
对DST刘海部位手绘遮罩。加强继续训练。

lifengze

come3002 发表于 2023-6-5 16:45
楼主有没有训练预览图。合成作品 脸上 发灰的截图？

那可能是炸丹了，确实有发蓝的地方，看来要重新回到备份了。感谢

come3002

lifengze 发表于 2023-6-5 17:45
那可能是炸丹了，确实有发蓝的地方，看来要重新回到备份了。感谢

一般越是 模糊的素材越不能开gan 太高。
你的gan 0.01 偏大的话，就把gan调为0.0001.跑一段 时间，再一点点加。

lifengze

come3002 发表于 2023-6-5 17:50
一般越是 模糊的素材越不能开gan 太高。
你的gan 0.01 偏大的话，就把gan调为0.0001.跑一段 时间，再一点 ...

学到了，确实SRC清晰度不是很好。

haruka515

src清晰度不够没必要开这么多东西 扭曲和学习率开一下就行 gan和tf完全不必 背景更是不建议用 感觉颜色不对可以开hsv跑