deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 1137|回复: 11

为什么训练几分钟就自动重启

[复制链接]

24

主题

65

帖子

831

积分

高级丹师

Rank: 5Rank: 5

积分
831
 楼主| 发表于 2023-6-18 16:26:33 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
配置是Xeon E5-2696 64G内存 虚拟内存10~120G 显卡3060 12G显存

开rct还会报错broken pipe error 32,不能训练
回复

使用道具 举报

4

主题

173

帖子

975

积分

高级丹师

Rank: 5Rank: 5

积分
975
发表于 2023-6-18 16:40:24 | 显示全部楼层
我也有过类似经历,后来换了更大功率的机箱电源解决了
回复 支持 反对

使用道具 举报

15

主题

1921

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
27057

万事如意节日勋章

发表于 2023-6-18 17:22:17 | 显示全部楼层
楼主用的哪个丹?
训练参数?
回复 支持 反对

使用道具 举报

2

主题

25

帖子

1425

积分

初级丹圣

Rank: 8Rank: 8

积分
1425
发表于 2023-6-18 17:48:10 | 显示全部楼层
本帖最后由 westofsun 于 2023-6-18 17:50 编辑

很大概率天气热了,机箱散热不好,过热重启

很小概率是你的模型什么的下牙过大导致的,
{有关这个论点 我可以从你的模型 数据  以及前天吃的啥 给你洋洋洒洒写出一篇带训练图的巨作}。
回复 支持 反对

使用道具 举报

24

主题

65

帖子

831

积分

高级丹师

Rank: 5Rank: 5

积分
831
 楼主| 发表于 2023-6-18 18:08:46 | 显示全部楼层
westofsun 发表于 2023-6-18 17:48
很大概率天气热了,机箱散热不好,过热重启

很小概率是你的模型什么的下牙过大导致的,

下牙过大是什么意思?dst有2万张图,可能是这个原因吧
回复 支持 反对

使用道具 举报

24

主题

65

帖子

831

积分

高级丹师

Rank: 5Rank: 5

积分
831
 楼主| 发表于 2023-6-18 18:10:34 | 显示全部楼层
come3002 发表于 2023-6-18 17:22
楼主用的哪个丹?
训练参数?

DF224丹,BS4,真脸学习率gan等等都没开,dst有2万张图
回复 支持 反对

使用道具 举报

15

主题

1921

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
27057

万事如意节日勋章

发表于 2023-6-18 18:16:48 | 显示全部楼层
本帖最后由 come3002 于 2023-6-18 18:23 编辑
lxmmc8 发表于 2023-6-18 18:10
DF224丹,BS4,真脸学习率gan等等都没开,dst有2万张图

丹和bs4没问题。
你可以看训练迭代时间是不是时间均匀。
可能1:时间不均匀,就要考虑素材,我 自闭2.0 曾经用wf1024和2048混用 一会700.一会3000,这样的瞬卡,导致加重电脑学习负担,最后重启过。

可能2:迭代时间均匀。就要先考虑电脑本身,可以加强散热,看有没有改进


回复 支持 反对

使用道具 举报

24

主题

65

帖子

831

积分

高级丹师

Rank: 5Rank: 5

积分
831
 楼主| 发表于 2023-6-18 18:27:28 | 显示全部楼层
come3002 发表于 2023-6-18 18:16
丹和bs4没问题。
你可以看训练迭代时间是不是时间均匀。
可能1:时间不均匀,就要考虑素材,我 自闭2.0 曾 ...

那就是散热问题了,素材都是wf512
回复 支持 反对

使用道具 举报

45

主题

500

帖子

3121

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3121
发表于 2023-6-18 18:55:20 | 显示全部楼层
lxmmc8 发表于 2023-6-18 18:27
那就是散热问题了,素材都是wf512

这么大内存,这是服务器啊。
回复 支持 反对

使用道具 举报

45

主题

500

帖子

3121

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3121
发表于 2023-6-18 18:59:51 | 显示全部楼层
come3002 发表于 2023-6-18 18:16
丹和bs4没问题。
你可以看训练迭代时间是不是时间均匀。
可能1:时间不均匀,就要考虑素材,我 自闭2.0 曾 ...

bs4当然有用了,因为为了让src轮廓更贴近dst,要使用更低的bs
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-11-24 14:23 , Processed in 0.168444 second(s), 34 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表