deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 1609|回复: 9

关于bs大小与扭曲和最终成像直接的关系探讨。

[复制链接]

17

主题

125

帖子

1000

积分

初级丹圣

Rank: 8Rank: 8

积分
1000
 楼主| 发表于 2022-10-14 14:33:11 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
本帖最后由 1006385231 于 2022-10-14 14:45 编辑

最新学习888大佬练全图,,SRC的loss在0.6左右,DST的loss在0.8左右

288的LIAE-UDT模型
全程BS12,开嘴眼优化,侧脸优化,扭曲,成像很像SRC,很满意

后来开始觉得loss变化不明显之后,关闭了扭曲继续BS12练,然后发现成像就变得开始越来越像DST

然后找回之前的模型档案,突发奇想用小bs迭代一下扭曲会不会更快。

然后BS4跌到了一段时间扭曲,发现依然是脸型依然是越来越像DST。

最终无奈还是大BS继续开扭曲迭代了。

不知道大家对BS大小以及RW扭曲与成像有没有什么见解。

回复

使用道具 举报

10

主题

320

帖子

3054

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3054

万事如意节日勋章

发表于 2022-10-15 09:47:24 | 显示全部楼层
1006385231 发表于 2022-10-14 15:46
是啊~所以内心很煎熬

所以我换回练dfudt了,关rw开gan,到后面就不像了
回复 支持 1 反对 0

使用道具 举报

2

主题

75

帖子

4万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
46701
发表于 2022-10-14 15:40:24 | 显示全部楼层
1006385231 发表于 2022-10-14 15:20
我正训前已经用1W张DST训练10W迭代删过3次AB了,现在产生的疑惑是只要大BS不关扭曲,就不会更接近DST。 ...

那你也不能一直开着扭曲训练啊,那会影响你的细节训练
回复 支持 0 反对 1

使用道具 举报

2

主题

75

帖子

4万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
46701
发表于 2022-10-14 15:15:14 | 显示全部楼层
LIAE的模型就是这样,在训练过程中SRC脸型会逐步趋向于DST,不过这个过程不是很明显。如果训练一段时间后发现这个问题,可以在备份后,试试删除interAB开扭曲跑上几个小时试试,然后再关扭曲继续训练。
回复 支持 反对

使用道具 举报

17

主题

125

帖子

1000

积分

初级丹圣

Rank: 8Rank: 8

积分
1000
 楼主| 发表于 2022-10-14 15:20:42 | 显示全部楼层
mnmna123 发表于 2022-10-14 15:15
LIAE的模型就是这样,在训练过程中SRC脸型会逐步趋向于DST,不过这个过程不是很明显。如果训练一段时间后发 ...

我正训前已经用1W张DST训练10W迭代删过3次AB了,现在产生的疑惑是只要大BS不关扭曲,就不会更接近DST。
回复 支持 反对

使用道具 举报

17

主题

125

帖子

1000

积分

初级丹圣

Rank: 8Rank: 8

积分
1000
 楼主| 发表于 2022-10-14 15:46:55 | 显示全部楼层
mnmna123 发表于 2022-10-14 15:40
那你也不能一直开着扭曲训练啊,那会影响你的细节训练

是啊~所以内心很煎熬
回复 支持 反对

使用道具 举报

17

主题

125

帖子

1000

积分

初级丹圣

Rank: 8Rank: 8

积分
1000
 楼主| 发表于 2022-10-15 11:21:04 | 显示全部楼层
df还需要udt吗?我看都说df-ud,真脸选择性的开呢~
回复 支持 反对

使用道具 举报

23

主题

268

帖子

1521

积分

初级丹圣

Rank: 8Rank: 8

积分
1521
发表于 2022-10-17 04:29:36 | 显示全部楼层
你就算不开扭曲,关了眼嘴它也会越来越像dst。说白了就是脸型不合适,融合的越好越不像,但是不代表它学崩了,你换个合适的脸来合成,依旧是像的。(我的想法是降低ae,拖慢他学表情的能力。或者及时刹车开学习率,还在实验中)
回复 支持 反对

使用道具 举报

17

主题

125

帖子

1000

积分

初级丹圣

Rank: 8Rank: 8

积分
1000
 楼主| 发表于 2022-10-17 12:51:22 | 显示全部楼层
cjlzkl 发表于 2022-10-17 04:29
你就算不开扭曲,关了眼嘴它也会越来越像dst。说白了就是脸型不合适,融合的越好越不像,但是不代表它学崩 ...

我做了很多测试,开着扭曲会比较像src,但是影响清晰的速度,但最终还是能清晰
回复 支持 反对

使用道具 举报

0

主题

26

帖子

187

积分

高级丹童

Rank: 2

积分
187
发表于 2022-10-17 15:26:18 | 显示全部楼层
难道要一直不断删除interAB?比如迭代百万次,删除了3,4次interAB,之后关了RW也会想dst?那lie-udt模型确实比较烦
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-9-22 17:28 , Processed in 0.100830 second(s), 11 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表