【高端操作】(2.14更新)香喷喷的白嫖Kaggle教程来了！！

willie · 发表于 2021-10-14 10:37:32

支持一下!!!

slib · 发表于 2021-10-14 08:32:36

本帖最后由 slib 于 2021-10-14 09:28 编辑

Hedwig 发表于 2021-10-13 22:26
我最大试过6G，保存很快。按着教程选择run without gpu...然后quick save半分钟就存好了 ...

刚刚成功save了，就是点击保存，等半个小时左右，不管error，直接点左侧code，就已经保存好了

Hedwig · 发表于 2021-10-13 22:26:45

slib 发表于 2021-10-13 21:41
保存失败可能是gpu问题？我出错，刷新页面之后，session 就一直在starting，然后cpu占用率一直是150%以上 ...

我最大试过6G，保存很快。按着教程选择run without gpu...然后quick save半分钟就存好了

slib · 发表于 2021-10-13 21:41:42

本帖最后由 slib 于 2021-10-13 21:52 编辑

保存失败可能是gpu问题？我出错，刷新页面之后，session 就一直在starting，然后cpu占用率一直是150%以上，总共15.9g的gpu显存占用了15.2g。我测试了在拷贝到output的时候就保存，失败；在没有运行的时候（draft session off）保存，失败；在训练模型时保存，失败；停止训练时保存失败；切换账号进行同样的尝试，失败
楼主有试过output文件在9g左右的时候吗，然后的话我的output里会比input少个600mb

slib · 发表于 2021-10-13 21:20:00

Hedwig 发表于 2021-10-13 21:17
点不点都可以

好吧，那我只能再保存试试看了，我检查了好多遍从代码到运行和训练都没啥问题，就是保存的时候一直是queued，然后跳出error，接着刷新界面保存也是同样的

Hedwig · 发表于 2021-10-13 21:17:06

slib 发表于 2021-10-13 21:14
ok那保存之前要点暂停训练dfl吗

点不点都可以

slib · 发表于 2021-10-13 21:14:13

Hedwig 发表于 2021-10-13 20:44
暂停训练只有不关机都不会清除output

ok那保存之前要点暂停训练dfl吗

Hedwig · 发表于 2021-10-13 20:44:52

slib 发表于 2021-10-13 20:37
会不会是因为我没停止训练？但停止训练的话不就没保存进度了

暂停训练只有不关机都不会清除output

slib · 发表于 2021-10-13 20:37:07

Hedwig 发表于 2021-10-13 19:08
多刷几次，你是模型很大吗？咋老失败。我用了两个月了从来没出现保存失败过。 ...

会不会是因为我没停止训练？但停止训练的话不就没保存进度了

slib · 发表于 2021-10-13 20:28:14

Hedwig 发表于 2021-10-13 19:08
多刷几次，你是模型很大吗？咋老失败。我用了两个月了从来没出现保存失败过。 ...

算大吧，不清楚。我parameter加workspace和dfl总共是9g左右，我刷新之后保存也是error，之前就算是error在第二次error之后去code界面里看data，output里也有文件，这次output里除了data_dst什么都没保存

		自动登录	找回密码
密码			立即注册（仅限QQ邮箱）

【高端操作】(2.14更新)香喷喷的白嫖Kaggle教程来了！！

可爱萌新勋章

荣誉会员勋章

小有贡献勋章