显卡CPU占用率问题

dd316316

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:NAN  参与人数:0  我的评分:未评

炼丹过程显卡怎么老是偷懒？怎么调整？

wzx945

你CPU占用太高了，一般CPU占用不会超过40%，你都100%占用了，所以GPU在等cpu
我觉得最可能的原因是，你的SRC或DST图片的分辨率比你炼的丹高太多了，同时你的batch_size又开的很高，导致cpu不停的缩放图片，cpu性能占用占满了。解决办法就是把SRC或DST图片的图片缩小，只要不是练416以上的丹，图片都缩到512就够了，dfl本身就提供了缩放图片的功能。
4.2) data_src util faceset resize
5.2) data_dst util faceset resize
这两个就是给图片缩放的。

pasanonic

参数看下   cpu不可能占那么多，训练模型最多15％

dd316316

pasanonic 发表于 2024-9-24 11:29
参数看下   cpu不可能占那么多，训练模型最多15％

我也不知道啊。。

dd316316

wzx945 发表于 2024-9-24 14:52
你CPU占用太高了，一般CPU占用不会超过40%，你都100%占用了，所以GPU在等cpu
我觉得最可能的原因是，你的SR ...

图片1024*1024  BS8 底丹224

dfl9999

dd316316 发表于 2024-9-24 15:08
图片1024*1024  BS8 底丹224

224的丹，用512分辨率的脸部切图就不会缩放，1024会不停用cpu缩放到512进行训练，cpu忙不过来无法满足显卡的训练速度导致显卡睡觉，你用dfl把切图缩回512就好了，224用不上1024的切图

seancai110

windows的资源管理器看ai训练不准的。因为资源管理器不计算cuda的使用率。当然，你可以在显卡的小窗口里把cuda的使用率显示出来，具体可以自己百度。

你显存已经用满了，说明显卡就是用到极限了。

platexyxy

啥丹？
除了网友们说的怀疑，我还怀疑是不是把模型跑到内存里了？

w7315511

显卡占用是满的，放心跑