deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 1811|回复: 24

src预览清晰度差距很大

[复制链接]

13

主题

77

帖子

3297

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3297
 楼主| 发表于 2023-9-7 05:53:43 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
本帖最后由 Lanwu 于 2023-9-7 19:14 编辑

屏幕截图 2023-09-06 234751.png

屏幕截图 2023-09-06 234722.png
大佬们,对于这种清晰度差距很大的情况该怎么处理呢(用的ICE版,均衡侧脸权重和loss平滑都开了),不管它接着练吗,还是把侧脸素材提取出来单独练比较好。。以前都是练256的,几乎没遇见过这种问题。
屏幕截图 2023-09-07 131151.png

补一张正脸的


回复

使用道具 举报

13

主题

527

帖子

3792

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3792
发表于 2023-9-7 09:23:16 | 显示全部楼层
若苗瞬 发表于 2023-9-7 09:20
就是训练不够吧。
呃没有正面的对比。

最后一张挺正的啊。。。
回复 支持 1 反对 0

使用道具 举报

13

主题

77

帖子

3297

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3297
 楼主| 发表于 2023-9-7 05:59:59 | 显示全部楼层
主要是我不清楚如果把其他素材都删掉只留侧脸素材的话,对模型会不会有什么影响
回复 支持 反对

使用道具 举报

7

主题

871

帖子

5788

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
5788

万事如意节日勋章

发表于 2023-9-7 08:31:23 | 显示全部楼层
Lanwu 发表于 2023-9-7 05:59
主要是我不清楚如果把其他素材都删掉只留侧脸素材的话,对模型会不会有什么影响 ...

实测影响不大,对比混合着一直硬练,性价比还是很高的.
回复 支持 反对

使用道具 举报

13

主题

527

帖子

3792

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3792
发表于 2023-9-7 09:20:19 | 显示全部楼层
就是训练不够吧。
呃没有正面的对比。

正面很清晰了,仅侧面这样子?
还有loss平滑开到最大8了么?
回复 支持 反对

使用道具 举报

13

主题

75

帖子

1364

积分

初级丹圣

Rank: 8Rank: 8

积分
1364
发表于 2023-9-7 09:39:00 | 显示全部楼层
侧脸素材太少 或者训练时间不够吧
回复 支持 反对

使用道具 举报

5

主题

241

帖子

5559

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
5559

万事如意节日勋章

QQ
发表于 2023-9-7 11:36:58 | 显示全部楼层
本帖最后由 Mrdeepfake 于 2023-9-7 11:57 编辑

单独练侧脸,对模型当然会有影响啊,容易过拟合......换句话说,你单独练侧脸时间越长,虽然侧脸会越变越清晰,但正脸会变模糊、相似性降低、五官变形的。影响当然有!训练时间越长,影响越明显!但如果你单独练一下侧脸、再练一下全角度、再单独练一下侧脸......如此反复,这种练法是有助于你加速全角度收敛的。这样练其实跟开 uniform yaw 一样。

另外,你那张侧脸不清晰,可能仅仅是训练时间不够(模型分辨率越高,训练时间也越长),并且它属于角度困难脸导致的。还有一个可能原因,你去检查一下那张脸 landmark,landmark 不准或者说精度差的脸很难跑清晰。若它 landmark 不准,纠正它后扔回训练集继续开 yaw 进行训练即可。
回复 支持 反对

使用道具 举报

13

主题

77

帖子

3297

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3297
 楼主| 发表于 2023-9-7 19:05:54 | 显示全部楼层
Mrdeepfake 发表于 2023-9-7 11:36
单独练侧脸,对模型当然会有影响啊,容易过拟合......换句话说,你单独练侧脸时间越长,虽然侧脸会越变越清 ...

因为用的是ICE版,可以直接在预览看landmark,这套素材的landmark都没问题,特别模糊的图几乎都是侧脸。那我就把大角度的素材都提出来,然后大角度和其他素材交替训练,一套炼个几万次然后换另一套,这么交替着来?
回复 支持 反对

使用道具 举报

5

主题

241

帖子

5559

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
5559

万事如意节日勋章

QQ
发表于 2023-9-7 19:41:50 | 显示全部楼层
Lanwu 发表于 2023-9-7 19:05
因为用的是ICE版,可以直接在预览看landmark,这套素材的landmark都没问题,特别模糊的图几乎都是侧脸。 ...

我建议你还是开启yaw,一次性训练吧。交替训练会牺牲正面角度训练效果及收敛速度的,最终你还要把正面角度重新都训练像,也不是那么容易的事。花费总时间两者应该差不多。开yaw训练上一晚上,应该会改善的。
回复 支持 反对

使用道具 举报

13

主题

77

帖子

3297

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3297
 楼主| 发表于 2023-9-7 20:04:00 | 显示全部楼层
Mrdeepfake 发表于 2023-9-7 19:41
我建议你还是开启yaw,一次性训练吧。交替训练会牺牲正面角度训练效果及收敛速度的,最终你还要把正面角 ...

呃。。uniform yaw不是均衡侧脸权重吗,我从头到尾一直都是开着的
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-11-24 00:48 , Processed in 0.157704 second(s), 39 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表