deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
楼主: ilikesw

请教:合成的视频有时脸部会闪动是什么原因?

[复制链接]

20

主题

499

帖子

5万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
51969

真我风采勋章

发表于 2023-10-21 21:20:14 | 显示全部楼层
1、看特征点
2、检查未切到脸的图
3、训练色差
一句话无图言屌
回复 支持 反对

使用道具 举报

13

主题

528

帖子

3796

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3796
发表于 2023-10-21 22:41:16 | 显示全部楼层
闪动
神奇的词,我甚至无法理解到底是什么现象……


是琦玉老师反复横跳
亦或洛基穿越时空
还是川剧变脸。
回复 支持 反对

使用道具 举报

6

主题

215

帖子

1871

积分

初级丹圣

Rank: 8Rank: 8

积分
1871
发表于 2023-10-22 14:49:12 | 显示全部楼层
检查一下合成的那些图片就可以看到了
回复 支持 反对

使用道具 举报

15

主题

1936

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
26150

万事如意节日勋章

发表于 2023-10-23 00:07:27 | 显示全部楼层
本帖最后由 come3002 于 2023-10-23 00:13 编辑

如果是樱花,高速激战,人头像会有移动,
从起点是清晰的,终点也是清晰的,
到高速激战过程速度太快了,因此产生大量模糊的图片,尤其带刘海的更严重,刘海一会有,一会没有,甚至把眼睛位置遮挡了,导致dfl切脸时候无法准确识别人脸五官位点,将来会换脸失败。
这样的作品就会闪动。尤其720p远古带刘海视频,几乎都会闪动。
另外一种是人脸虚影抖动,也会导致作品闪动。尤其src,跟dst脸型差别很大,虚影越明显。
当然还有大面积的大仰角 dfl识别失败,导致错误切脸等其他情况。
因为你没有上传图片。
需要你自己逐帧分析自行判断是哪一类。


回复 支持 反对

使用道具 举报

18

主题

169

帖子

2912

积分

初级丹圣

Rank: 8Rank: 8

积分
2912

万事如意节日勋章

 楼主| 发表于 2023-10-23 06:20:21 | 显示全部楼层
s659982344 发表于 2023-10-22 14:49
检查一下合成的那些图片就可以看到了

感谢指点,我去合成的图片检查看看
回复 支持 1 反对 0

使用道具 举报

18

主题

169

帖子

2912

积分

初级丹圣

Rank: 8Rank: 8

积分
2912

万事如意节日勋章

 楼主| 发表于 2023-10-23 06:21:23 | 显示全部楼层
come3002 发表于 2023-10-23 00:07
如果是樱花,高速激战,人头像会有移动,
从起点是清晰的,终点也是清晰的,
到高速激战过程速度太快了,因 ...

我照大佬说的逐项检查看看,感谢!
回复 支持 反对

使用道具 举报

15

主题

1936

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
26150

万事如意节日勋章

发表于 2023-10-23 08:36:04 | 显示全部楼层
本帖最后由 come3002 于 2023-10-23 08:55 编辑

ilikesw 发表于 2023-10-23 06:21
我照大佬说的逐项检查看看,感谢!




如果是合成的作品图片特别多。可用抽样筛查法。
比如 merged文件下,8列只选中 左边一列。复制到一个新的文件夹。
逐帧筛查
这样就是1/8的工作量。从而提高效率。


360截图20231023083202932.jpg



dfl实质是人脸转换软件。高清的src要配高清的dst才能练好的专丹
也就是说如果你的SRC是 4k 电视剧中近景切割1024,dst也应该是4k中近景切割 1024.
故低画质DST会带来很大的问题
如果是中远景,高速激战。 DST大量模糊,或画质低,训练时候会写入model。还会诱发抖动等问题。
建议炼制专丹,一定要更换更好的画质好的 DST。
现在樱花很多有多版本流出,720 1G,1080p 5G,4k 30g。这样的话就选4k版本比720p,1080p 要好的多。



回复 支持 反对

使用道具 举报

6

主题

215

帖子

1871

积分

初级丹圣

Rank: 8Rank: 8

积分
1871
发表于 2023-10-23 10:07:56 | 显示全部楼层
一般都是转头 运动模糊 遮挡的时候 也就是不易识别的时候
回复 支持 反对

使用道具 举报

18

主题

169

帖子

2912

积分

初级丹圣

Rank: 8Rank: 8

积分
2912

万事如意节日勋章

 楼主| 发表于 2023-10-23 10:38:19 | 显示全部楼层
come3002 发表于 2023-10-23 08:36
ilikesw 发表于 2023-10-23 06:21
我照大佬说的逐项检查看看,感谢!

这样的话,剩下的7/8不是还是要需要去筛查吗?看了大佬好多的帖子了,大佬能不能炼一个224的丹啊?小显存只有羡慕的份。
回复 支持 反对

使用道具 举报

15

主题

1936

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
26150

万事如意节日勋章

发表于 2023-10-23 11:02:09 | 显示全部楼层
ilikesw 发表于 2023-10-23 10:38
这样的话,剩下的7/8不是还是要需要去筛查吗?看了大佬好多的帖子了,大佬能不能炼一个224的丹啊?小显存 ...

1/8是抽样调查。能管中窥豹。反应问题

问题不大,极少错误。就手动把 dst 8/8 所有错误改过来
问题很大,比如某段301-501都错了。就到dst里把301-501都删了
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-9-24 05:31 , Processed in 0.089331 second(s), 9 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表