训练后期，如何让形状定下来？

ahui1125

wtxx8888 发表于 2024-5-4 19:51
嗯，还有一点就是，素材量越多，嘴眼优先的作用越慢。
表现就是，海量素材下，可能关闭初期你看不到变化。 ...

感谢大佬，醍醐灌顶

wtxx8888

728187887 发表于 2024-5-4 19:59
我是按照这个帖子来的，不知道还有没其它坑
https://dfldata.cc/forum.php?mod=viewthread&tid=9528

这么说吧，我炼丹，起步扭曲加嘴眼，跑到很低的LOSS（不开GAN，不开学习率，要很低的LOSS），然后合成。
有问题，回来开项目修（大概率是没问题的，偶尔可能会色差大）。
DF就这么简单。LIAE可能需要删几次AB文件。

ahui1125

wtxx8888 发表于 2024-5-4 20:22
这么说吧，我炼丹，起步扭曲加嘴眼，跑到很低的LOSS（不开GAN，不开学习率，要很低的LOSS），然后合成。
...

大佬，删几次AB是什么意思，就是降到不能降了，删掉AB再来一次吗？

wtxx8888

ahui1125 发表于 2024-5-4 20:29
大佬，删几次AB是什么意思，就是降到不能降了，删掉AB再来一次吗？

LIAE架构的才要删AB文件。意思是重置SRC与DST的关联性，说白了就是重新选图（多用于重置相似度，即你觉得DST换的脸，不像SRC）不过LIAE架构最高就八成像，不如DF那么像SRC。

ahui1125

wtxx8888 发表于 2024-5-4 20:34
LIAE架构的才要删AB文件。意思是重置SRC与DST的关联性，说白了就是重新选图（多用于重置相似度，即你觉得D ...

感谢大佬解惑，明白了

zhou041234

wtxx8888 发表于 2024-5-4 20:09
我一般扭曲是开到底的，因为我不GAN

感谢

pasanonic

没必要看这种图,这种画面也就1到3帧,晃眼就过去了,你陷得越深自己会越累
你可以看看MVE各个图片的特征点,定位都不一样,特别是嘴唇

planenalp

wtxx8888 发表于 2024-5-4 20:22
这么说吧，我炼丹，起步扭曲加嘴眼，跑到很低的LOSS（不开GAN，不开学习率，要很低的LOSS），然后合成。
...

请教一下很低的LOSS是指多低？
嘴眼状态下的0.1x？0.2x？
心里没概念，想做个参考，谢谢

wtxx8888

planenalp 发表于 2024-5-4 23:52
请教一下很低的LOSS是指多低？
嘴眼状态下的0.1x？0.2x？
心里没概念，想做个参考，谢谢 ...

换脸（开启训练遮罩内人脸）LOSS 0.2以下（开扭曲开嘴眼开大LOSS，没大LOSS要到0.1），GAN完全不需要开。
个人意见，别用BS 开不到8的丹，这个LOSS要达到，BS开8都要很久很久。。。

当然还要看你的素材有多清晰，不清晰的图，本身LOSS就很低，我这是指的高清，大概224的丹就出睫毛的素材

planenalp

wtxx8888 发表于 2024-5-4 23:59
换脸（开启训练遮罩内人脸）LOSS 0.2以下（开扭曲开嘴眼开大LOSS，没大LOSS要到0.1），GAN完全不需要开。 ...

那确实会很费劲，只适合少数几个特别想练的丹了
现在测试的一个320Liae扭曲嘴眼+大LOSS到0.27左右已经要好几天才能降0.01，高分辨率高参的话只会更久
尝试了下开LRD半天不到就降到0.23，差别有点大