dfl逃不开的魔咒

xunlian

july 发表于 2025-5-25 09:31
大佬好，请教个问题。
我用的都是4K的切的影视剧素材，模型分辨率和四维也足够大，请问问什么怎么练，最多 ...

这是因为DFL自带的损失函数问题，无解，只有开GAN

dfl9999

july 发表于 2025-5-25 09:31
大佬好，请教个问题。
我用的都是4K的切的影视剧素材，模型分辨率和四维也足够大，请问问什么怎么练，最多 ...

dst素材要用ffhq无遮挡精挑的高清脸图，src也要精挑，模型最好用预训练模型

dfldata1316

dfl9999 发表于 2025-5-25 00:40
比如每次保存的时候loss跨度小于0.03，其实你早停晚停根本不影响，最终结果是src的质量决定的 ...

25分钟下降0.03啊，我现在的情况基本上是4 5个小时（2 3W迭代）不下降0.01（徘徊）就下一阶段了，是不是浪费了呢？

滚石

1. 不开src翻转
2. 人脸超分工具要慎用。 最佳的src就是素材本身就很清晰。本身是清晰的src，用超分后反而可能导致质量下降

july

xunlian 发表于 2025-5-25 09:54
这是因为DFL自带的损失函数问题，无解，只有开GAN

开gan效果也不明显，也很难出

dfl9999

滚石 发表于 2025-5-25 16:07
1. 不开src翻转
2. 人脸超分工具要慎用。 最佳的src就是素材本身就很清晰。本身是清晰的src，用超分后反而 ...

我试过70%以上超分素材和原生4k素材混在一起训练，出来的效果很差，如果先投入4k原生训练到收敛再加入超分素材，模型会很清晰，混用效果是最差的，wan2.1可以保证特征空间的一致性，目前来说topaz photo ai这类可以完全放弃不用了

july

dfl9999 发表于 2025-5-25 10:34
dst素材要用ffhq无遮挡精挑的高清脸图，src也要精挑，模型最好用预训练模型 ...

我是直接实操，用src和dst实例训练的，素材应该没问题，src也都是挑过的

dfl9999

july 发表于 2025-5-25 17:43
我是直接实操，用src和dst实例训练的，素材应该没问题，src也都是挑过的

我的416预训练模型转正训不开gan，src的细节是随便出的，但是碰到烂src一样模糊塑料脸，你说的模糊有可能就是src的特征空间一致性差造成的模型无法收敛到稳定特征

a18367774619

july 发表于 2025-5-25 17:43
我是直接实操，用src和dst实例训练的，素材应该没问题，src也都是挑过的

并不是4K视频切得就是高清图，比如人物在运动轨迹的时候脸部是糊的，也被AI识别到切下来了，可能你的SRC里有大量脸部不清晰的图，别说一个月，图片清晰我三天就可以练完一个模型

xunlian

july 发表于 2025-5-25 17:40
开gan效果也不明显，也很难出

如果你的素材没问题 那就只有后期开GAN 才能出细节。为什么会有磨皮效果，就是因为DFL自带的损失函数是基于平均绝对误差，这种损失函数会忽略小的误差特征（人脸上的痣 皱纹等，会忽略掉）。好比一朵红花长在一片草原上，整体看上去，你根本你不会发现有一朵红花。