deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 979|回复: 7

loss opt in ice v.1.31 ?

[复制链接]

4

主题

42

帖子

752

积分

高级丹师

Rank: 5Rank: 5

积分
752

万事如意节日勋章

 楼主| 发表于 2023-2-27 15:14:41 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
本帖最后由 qweasd21 于 2023-2-27 15:23 编辑

Loss平滑如何使用 = loss optimizer ?



它们相同吗?
bbbb.JPG
回复

使用道具 举报

3

主题

434

帖子

2448

积分

初级丹圣

Rank: 8Rank: 8

积分
2448
发表于 2023-2-27 18:22:18 | 显示全部楼层
相同
建议中期使用
早期要学的东西太多,开这个用处不大
中期是关键,容易的已经学好了,难学的还差点
LOSS平滑就是对付这个问题的
后期开gan跑细节,关键点不在LOSS平滑,开不开影响不大。

评分

参与人数 1贡献 +1 收起 理由
WaveBedo + 1 十分给力!

查看全部评分

回复 支持 反对

使用道具 举报

3

主题

434

帖子

2448

积分

初级丹圣

Rank: 8Rank: 8

积分
2448
发表于 2023-2-27 18:25:28 | 显示全部楼层
这玩意就是炼丹神器
一般人练不好丹,就是缺这么个功能
我以前多次炼丹失败都是中期出问题
教授造福人类啊
回复 支持 反对

使用道具 举报

3

主题

42

帖子

300

积分

初级丹师

Rank: 3Rank: 3

积分
300
发表于 2023-2-27 18:36:59 | 显示全部楼层
ken2099 发表于 2023-2-27 18:22
相同
建议中期使用
早期要学的东西太多,开这个用处不大

我看說明是配搭扭曲使用

但扭曲不是前期就開嗎
回复 支持 反对

使用道具 举报

3

主题

434

帖子

2448

积分

初级丹圣

Rank: 8Rank: 8

积分
2448
发表于 2023-2-27 18:49:13 | 显示全部楼层
本帖最后由 ken2099 于 2023-2-27 18:50 编辑
twmsn 发表于 2023-2-27 18:36
我看說明是配搭扭曲使用

但扭曲不是前期就開嗎

我说的前期是从0练起的前期
拿别人的神丹来用
前人已经跑过上百万迭代了
所以那已经是中后期了
一个丹好不好,重点在于中期
你复用别人的神丹
我觉得全程开启LOSS平滑也没什么问题
回复 支持 反对

使用道具 举报

8

主题

74

帖子

692

积分

高级丹师

Rank: 5Rank: 5

积分
692
发表于 2023-2-27 20:35:03 | 显示全部楼层
这个在哪里开
回复 支持 反对

使用道具 举报

6

主题

178

帖子

2032

积分

初级丹圣

Rank: 8Rank: 8

积分
2032
发表于 2023-10-11 10:45:25 | 显示全部楼层
终于明白了loss平滑的用途了,多谢分享!
回复 支持 反对

使用道具 举报

6

主题

178

帖子

2032

积分

初级丹圣

Rank: 8Rank: 8

积分
2032
发表于 2023-10-11 10:50:50 | 显示全部楼层
但loss平滑占显存,BS越大显存占用越多,显存小的得自己考虑了,小显存的可以看到开了LOSS平滑后,迭代时间隔一会儿显示一个大的秒数,BS越大,这个数值越大,这样你的迭代时间就长了,大显存不懂,大家自己看
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-11-12 04:30 , Processed in 0.129592 second(s), 39 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表