deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 924|回复: 9

运动模糊的素材需要剔除吗?

[复制链接]

11

主题

37

帖子

221

积分

初级丹师

Rank: 3Rank: 3

积分
221

万事如意节日勋章

 楼主| 发表于 2023-11-5 16:57:31 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
加入进去会不会让换脸的运动模糊更自然?还是说只要高清图片
回复

使用道具 举报

15

主题

1937

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
26280

万事如意节日勋章

发表于 2023-11-5 17:55:43 | 显示全部楼层
本帖最后由 come3002 于 2023-11-5 17:57 编辑

炼专丹主体阶段 或早期阶段 尽量不要模糊素材。高质量的清晰的素材能加快炼丹速度。
(早期大量的模糊素材会污染这个model,甚至让神丹底单失效)。
在练一段时间一些细节出来后。如果合成视频发现 比较僵硬。补素材阶段发现比如目光呆滞,就找 转动眼球等一些动作。抬头动作,听闻信息 惊讶等动作。
1s-2秒 左右的 动作 逐帧保留(中间有少量模糊也要保留)。
练一段时间,再测试看有没有改善。
这样既能加快炼丹速度,又能满足一些动作逼真,还减少大量模糊素材对model的污染,让高质量的丹维持下去。。
回复 支持 1 反对 0

使用道具 举报

13

主题

528

帖子

3796

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3796
发表于 2023-11-5 17:32:44 | 显示全部楼层
从经验上看,保留src一小部分模糊的图片,确实有利于dst不同清晰度的合成。
否则背景模糊,仅脸清楚,很违和。
回复 支持 反对

使用道具 举报

3

主题

75

帖子

576

积分

高级丹师

Rank: 5Rank: 5

积分
576

万事如意节日勋章

发表于 2023-11-6 06:17:48 | 显示全部楼层
come3002 发表于 2023-11-5 17:55
炼专丹主体阶段 或早期阶段 尽量不要模糊素材。高质量的清晰的素材能加快炼丹速度。
(早期大量的模糊素材 ...

学到了感谢大大
回复 支持 反对

使用道具 举报

1

主题

24

帖子

343

积分

初级丹师

Rank: 3Rank: 3

积分
343
发表于 2023-11-6 06:57:44 | 显示全部楼层
所以模糊素材要先拿出資料夾?? 等訓練到清晰再放回去??
回复 支持 反对

使用道具 举报

15

主题

1937

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
26280

万事如意节日勋章

发表于 2023-11-6 08:56:07 | 显示全部楼层
本帖最后由 come3002 于 2023-11-6 09:02 编辑
eihj2002 发表于 2023-11-6 06:57
所以模糊素材要先拿出資料夾?? 等訓練到清晰再放回去??

神丹底单一般是用高质量的图片训练的。
4k 电视剧,素材还是相对容易搞到。
找了一份在线视频,截图举例说明。

下图 左图 高质量在线画质      平板截屏
右图 一般画质 平板截屏
360截图20231106083131365.jpg

由于是中景,放大看细节。
左图 能看清嘴唇纹理。
右图不能看清嘴唇纹理。练嘴唇纹理难度大
360截图20231106083002924.jpg

理想条件下,相同角度相同光影下(比如10张高质量),都是左边这类的能看清嘴唇纹理图片为佳,容易练出嘴唇纹理
现实条件:很容易混入一般素材(比如5张 高质量,5张中等),甚至大量模糊素材(比如10张)。dfl不容易知道该用什么素材合适。就是纯靠猜了,迭代时候 采用高质量的比例低(比如5张高,总20张,那么一来数量增加,二来效率明显降低),训练速度会大大减慢。
故,模糊SRC素材能不要就不要。基本训练差不多时候,需要某些少量补表情时候,逐帧保留,镜头中模糊素材占总训练图片比例很小,故影响也很小。

另外,480,720等模糊DST能不用就不用,模糊DST切脸即便是信息点是正确的,也容易发生刘海边出现黑色版块,异常白斑等引起抖动。

坛友 运动模糊的一张樱花图片以及 训练效果截图.

360截图20231106085307318.jpg

第一步:放大坛友的模糊DST图片。截图 607x600


猫版汉化dfl 切脸 WF512,检查debug 脸部位点,脸部识别成功。

360截图20231106085333950.jpg

图1 图2 白色箭头 腮部淡淡灰边 基本不影响感观
图3 图4 红色箭头 腮部异常黑边 直接影响感观
图3 蓝色箭头 刘海旁异常黑边,太阳穴 异常白边(这一结果跟坛友的相同)。直接影响感观.

360截图20231105222116987.jpg

4k欧美,4k樱花现在喷涌而出。能用 高质量的DST训练 ,不要用 远古 480 720等 模糊的樱花训练 .可以少走弯路.
回复 支持 反对

使用道具 举报

20

主题

499

帖子

5万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
52386

真我风采勋章

发表于 2023-11-6 13:41:52 | 显示全部楼层
come3002 发表于 2023-11-6 08:56
神丹底单一般是用高质量的图片训练的。
4k 电视剧,素材还是相对容易搞到。
找了一份在线视频,截图举例说 ...

别老搞樱花片了,以后身体会出问题的
回复 支持 反对

使用道具 举报

15

主题

1937

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
26280

万事如意节日勋章

发表于 2023-11-6 13:49:16 | 显示全部楼层
fanda 发表于 2023-11-6 13:41
别老搞樱花片了,以后身体会出问题的

感谢提醒。仓鼠型,下载了几百G只收藏。很多都吃灰。
个别图片,拿来研究学习技术用。
回复 支持 反对

使用道具 举报

6

主题

215

帖子

1886

积分

初级丹圣

Rank: 8Rank: 8

积分
1886
发表于 2023-11-6 14:45:21 | 显示全部楼层
运动模糊时间短可以不用换
回复 支持 反对

使用道具 举报

1

主题

11

帖子

170

积分

高级丹童

Rank: 2

积分
170
发表于 2023-11-7 14:44:14 | 显示全部楼层
那个右边糊一点点的图,用topaz photo ai之类的软件可以处理成不糊的高清的。
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-10-4 14:39 , Processed in 0.099087 second(s), 12 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表