deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 1224|回复: 16

新模型,启动训练当场崩溃,有没有大佬能指导下

[复制链接]

2

主题

78

帖子

566

积分

高级丹师

Rank: 5Rank: 5

积分
566
 楼主| 发表于 2022-3-13 20:48:29 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
本帖最后由 tianming 于 2022-3-14 16:58 编辑

新模型,启动训练当场就崩溃,这是为啥呢?

src和dst都是用的自带的预训练数据集,有没有大佬能指导下
如果使用pretrain=true的话,就能正常训练,20个迭代就能出人影。

image.png
image.png


--------------------------------分割线-------------------------------------------------

经过查看dfl源码,问题解决了,大概原因就是默认预训练逻辑里(pretrain=true模式下),会强制设置几个参数,比如 uniform_yaw=true,random_warp=false,random_src_flip=true,random_dst_flip=true
其中关键的是random_warp,在模型参数设置的比较大时(如图ae-dims=512,e_dims=128),必须random_warp=false才能正常预训练,开随机扭曲立刻就崩。
回复

使用道具 举报

0

主题

14

帖子

373

积分

初级丹师

Rank: 3Rank: 3

积分
373
发表于 2022-3-13 20:56:29 | 显示全部楼层
不懂帮顶
回复

使用道具 举报

2

主题

263

帖子

3442

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3442

万事如意节日勋章

发表于 2022-3-13 22:04:35 | 显示全部楼层
pretrain=true 是开预训练 你不开预训练报错的代码截个图看下嗷 不然不知道哪里的问题
回复 支持 反对

使用道具 举报

2

主题

78

帖子

566

积分

高级丹师

Rank: 5Rank: 5

积分
566
 楼主| 发表于 2022-3-13 22:21:15 | 显示全部楼层
muyanzhao 发表于 2022-3-13 22:04
pretrain=true 是开预训练 你不开预训练报错的代码截个图看下嗷 不然不知道哪里的问题 ...

没有报错,训练正常进行,问题是预览窗口一直一片红,不出人影。这种情况就不是模型崩了么。
回复 支持 反对

使用道具 举报

215

主题

1996

帖子

66万

积分

管理员

Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96

积分
666013

隐世金马甲勋章超级版主勋章可爱萌新勋章见习版主勋章荣誉会员勋章男同管理员-无尚荣耀勋章优质版主勋章小有贡献勋章

发表于 2022-3-13 23:02:35 | 显示全部楼层
崩了
提供数字人直播服务、文字/音频驱动数字人服务,有意者联系我QQ563861181
全站默认解压密码dfldata.xyz
DFL交流QQ群五群974612885
AI绘画交流QQ群710238550
我的B站账号:特看科技的滚石   其他自称彦祖的不是我,请勿上当
回复

使用道具 举报

1

主题

202

帖子

2078

积分

初级丹圣

Rank: 8Rank: 8

积分
2078
发表于 2022-3-13 23:07:27 | 显示全部楼层
不懂帮顶
回复

使用道具 举报

22

主题

615

帖子

4609

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4609
发表于 2022-3-13 23:13:32 | 显示全部楼层
不懂帮顶
回复

使用道具 举报

4

主题

208

帖子

3155

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3155
发表于 2022-3-13 23:20:12 | 显示全部楼层
第一次碰到,学习下
回复 支持 反对

使用道具 举报

16

主题

207

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
12850
发表于 2022-3-13 23:48:16 | 显示全部楼层
你这个参数是不是开太高了,512毫无必要........
回复 支持 反对

使用道具 举报

8

主题

400

帖子

3483

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3483
发表于 2022-3-14 00:21:20 | 显示全部楼层
有个几万迭代再来说崩不崩的事吧,刚启动你还想看到什么?
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-9-21 10:50 , Processed in 0.119898 second(s), 10 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表