训练时单次时间越来越长是正常的吗

2715410008

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:NAN  参与人数:0  我的评分:未评

到后面已经9.6秒一次了

wtxx8888

你显卡温度过高了被降频了吧。或者系统运行时间过久了，要24小时重启一次，这都会变慢

xzdeyy

我的a卡经常也这样，有时候还会死机

1234qwer111

wtxx8888 发表于 2022-9-15 14:04
你显卡温度过高了被降频了吧。或者系统运行时间过久了，要24小时重启一次，这都会变慢 ...

看到我认为的技术控了。
有空能到我最新发的帖子帮参考下问题不？谢谢了！
“收到，谢谢，感觉你蛮专业的，能不能多问点。
因为开始是奔着3090去的，3090就目前和A4000价格也就贵2000。
但是贵在24G的内存。如果A5000现在比3090还贵……
就是你能不能帮我分析下或者你清楚的知道24G的显存和16G的显存对模型的增益有多大。
假如都在开启高质量高参数，BS也在16以上的话。
16G的显存最大能运行多大的模型，24G的呢？
24G的显存能完美驾驭512的模型吗？16G的又能完美驾驭到多少呢？感谢！
其它路过的大佬也帮忙分析下呗？”

wtxx8888

1234qwer111 发表于 2022-9-16 22:40
看到我认为的技术控了。
有空能到我最新发的帖子帮参考下问题不？谢谢了！
“收到，谢谢，感觉你蛮专业的 ...

24G不能完美512，512的高参（底限四维24G显存肯定带不动）。
16G应该可以288或320的高参（320可能不够）。
结论就是想512必需24G以上显存的专业卡，不然最多低参512，效果还不如400几的高参

2715410008

xzdeyy 发表于 2022-9-16 17:46
我的a卡经常也这样，有时候还会死机

确实，我原来n卡一点问题没有

1234qwer111

wtxx8888 发表于 2022-9-17 01:57
24G不能完美512，512的高参（底限四维24G显存肯定带不动）。
16G应该可以288或320的高参（320可能不够） ...

收到，谢谢，24G作为参数了，我还是预计买3090ti了。
那在多问一句。24G可以完美384或者320吗？我知道可以自己试验，但是能吸收点经验可以少些弯路嘛……

wtxx8888

1234qwer111 发表于 2022-9-18 18:14
收到，谢谢，24G作为参数了，我还是预计买3090ti了。
那在多问一句。24G可以完美384或者320吗？我知道可 ...

24G的显卡384肯定可以完美的

2715410008

wtxx8888 发表于 2022-9-15 14:04
你显卡温度过高了被降频了吧。或者系统运行时间过久了，要24小时重启一次，这都会变慢 ...

确实是降频了，满载102°，撑不到10分钟就降频了