训练一段时间之后，数据不动了，是什么原因？

pasanonic · 发表于 2024-3-7 19:42:56

重新安装客户端试试,注意备份workspace

WaveBedo · 发表于 2024-3-7 20:03:36

pasanonic 发表于 2024-3-7 19:42
重新安装客户端试试,注意备份workspace

应该跟安装无关，RG、ME两个版本，出现同样的问题
可能是显卡的问题，也可能是我电脑的问题

也怀疑是不是迭代10万之后，模型数据太大了，我的电脑应付不了了
就像水满了，再加，加不了了

pasanonic · 发表于 2024-3-7 20:17:29

本帖最后由 pasanonic 于 2024-3-7 20:20 编辑

WaveBedo 发表于 2024-3-7 20:03
应该跟安装无关，RG、ME两个版本，出现同样的问题
可能是显卡的问题，也可能是我电脑的问题

能稳定运行10万,硬件应该不会有问题,肯定是软件因素
这要排查看看驱动是不是后台自动更新了,最近有没有装什么软件,换个实验模型试试,或者只开扭曲,其他都关掉跑

WaveBedo · 发表于 2024-3-8 18:37:19

lknet 发表于 2024-3-7 19:32
不用一个硬盘
你可以建个新的低参数模型跑跑试试,能跑大概率显存问题

搞清楚了，应该是没开梯度裁剪的原因
打开梯度裁剪之后，可以继续跑了

WaveBedo · 发表于 2024-3-8 18:38:50

pasanonic 发表于 2024-3-7 20:17
能稳定运行10万,硬件应该不会有问题,肯定是软件因素
这要排查看看驱动是不是后台自动更新了,最近有没 ...

搞清楚了，应该是没开梯度裁剪的原因

		自动登录	找回密码
密码			立即注册（仅限QQ邮箱）