请问换脸换出来的视频中换的人脸一直抖动怎么解决啊？

2560362144

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:NAN  参与人数:0  我的评分:未评

各位大佬！请问换脸换出来的视频中换的人脸一直抖动怎么解决啊？

come3002

1. 能用1080p高码率不要用低码率。
dfl 对低码率模糊的图片即便切出来换脸也容易失败。连续帧就是发生抖动









2.检查DST 下 aligned删除错误图片。
如下图 错误切的图片要删掉。有的需要重新手动切割

htyy

关闭扭曲后训练不够，像素点没有稳定下来

Mrdeepfake

我告诉你一种万能解决方法，不要用魔切快切脸，用 DFL 切脸；训练时开启 rct 肤色转化；合成时用 overlay 合成模式，不要用包含 seamless 的合成模式。只要你切脸精度足够高， src 肤色种类也不是非常多，保管脸五官虚浮抖动、肤色或边缘肤色闪烁及魔切快切脸带来的模型收敛难度增加、允许达到的最高清晰度上限下降、合成脸五官存在不同程度的模糊与变形等妖魔鬼怪统统都不会出现！

若即使这样做仍有肤色微微闪烁现象出现（概率很小），在训练后期可以用一套肤色统一的 src 素材集代替原素材训练一段时间，能改善肤色闪烁问题。

djblue999

训练时间太短了吧，迭代次数百万起步，

谷谷

迭代次数不够或者人脸定位有问题吧？

feng7902

简单，就是先这样子在这样子，在修改一下这样子，在那样子，就好了

2560362144

come3002 发表于 2023-9-5 19:58
1. 能用1080p高码率不要用低码率。
dfl 对低码率模糊的图片即便切出来换脸也容易失败。连续帧就是发生抖动
...

谢谢大佬！

2560362144

Mrdeepfake 发表于 2023-9-5 09:04
我告诉你一种万能解决方法，不要用魔切快切脸，用 DFL 切脸；训练时开启 rct 肤色转化；合成时用 overlay  ...

谢谢大佬！

深海鳕鱼

Mrdeepfake 发表于 2023-9-5 09:04
我告诉你一种万能解决方法，不要用魔切快切脸，用 DFL 切脸；训练时开启 rct 肤色转化；合成时用 overlay  ...

魔切确实比DFL切脸精准度低，但也不至于低很离谱。最近发现，自行更新了魔切，landmark增强处理选clahe，以往是hist，发现准度比以前高，尤其某些侧脸以前眉毛坐标飞起，现在不会，俯仰角度最少80%准度。
以前用hist模式稍微大点角度都捕捉不到，或者是坐标乱飞。
不是吹嘘魔切，但对于素材多的情况下，选用clahe模式准度与DFL不相上下的，我会选择魔切，hist跟mean简直没法看，纯属个人使用反馈。