deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 1355|回复: 25

一直在验证一个想法(这个想法最后证明是错的最新帖子有)

[复制链接]

34

主题

503

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
12658
 楼主| 发表于 2024-11-11 20:21:35 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
本帖最后由 dfl9999 于 2024-12-11 21:05 编辑

1000609816.jpg







评分

参与人数 1贡献 +1 收起 理由
Terea + 1 太好了感谢楼主

查看全部评分

回复

使用道具 举报

34

主题

503

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
12658
 楼主| 发表于 2024-11-11 20:41:52 | 显示全部楼层
本帖最后由 dfl9999 于 2024-11-11 20:43 编辑
seancai110 发表于 2024-11-11 20:40
src和dst用相同素材对练本来就只是预训练而已啊。也没人追求预训练要练得多清晰,所以不会练到过拟合 ...

我就练到过拟合了,我觉得要在可以操作范围内把模型和素材的潜力压榨到极限
回复 支持 0 反对 1

使用道具 举报

13

主题

1096

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
13952
发表于 2024-11-11 20:40:17 | 显示全部楼层
src和dst用相同素材对练本来就只是预训练而已啊。也没人追求预训练要练得多清晰,所以不会练到过拟合
回复 支持 1 反对 0

使用道具 举报

3

主题

209

帖子

4623

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4623
发表于 2024-11-11 20:31:05 | 显示全部楼层
这个想法很有意思,但是我的设备不允许我这样尝试
回复 支持 反对

使用道具 举报

34

主题

503

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
12658
 楼主| 发表于 2024-11-11 20:32:45 | 显示全部楼层
Terea 发表于 2024-11-11 20:31
这个想法很有意思,但是我的设备不允许我这样尝试

我这一个半月都在试这个,貌似是可行的,常规的训练方法局限性太大了
回复 支持 反对

使用道具 举报

44

主题

1011

帖子

5512

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
5512

万事如意节日勋章开心娱乐节日勋章

发表于 2024-11-11 20:33:15 | 显示全部楼层
练多了也不好,loss值参差不齐,有的质量很好,学的很快,降的也飞快,但是看过一个帖子说,loss值低到一定的值就会爆丹,所以分批学慢慢压榨让模型学新的图,还有种方法,通过各种参数的开启来增加学习难度,提高泛化
但也有个问题,dfl的模型好像学到一定的阶段,新的学习数据会顶掉原来的,这个就烦人了.
回复 支持 反对

使用道具 举报

34

主题

503

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
12658
 楼主| 发表于 2024-11-11 20:35:18 | 显示全部楼层
pasanonic 发表于 2024-11-11 20:33
练多了也不好,loss值参差不齐,有的质量很好,学的很快,降的也飞快,但是看过一个帖子说,loss值低到一定的值就 ...

小ae比如256以下肯定会顶数据,所以我都是开512,甚至可以考虑更大
回复 支持 反对

使用道具 举报

34

主题

503

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
12658
 楼主| 发表于 2024-11-11 20:36:20 | 显示全部楼层
本帖最后由 dfl9999 于 2024-11-11 20:38 编辑
pasanonic 发表于 2024-11-11 20:33
练多了也不好,loss值参差不齐,有的质量很好,学的很快,降的也飞快,但是看过一个帖子说,loss值低到一定的值就 ...

还是一个火候的问题,不要练死劲,前戏再多,我们最后的目标反正都是专人src
回复 支持 反对

使用道具 举报

34

主题

503

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
12658
 楼主| 发表于 2024-11-11 20:39:42 | 显示全部楼层
pasanonic 发表于 2024-11-11 20:33
练多了也不好,loss值参差不齐,有的质量很好,学的很快,降的也飞快,但是看过一个帖子说,loss值低到一定的值就 ...

目前在试liae,比df丹友好多了,就是同样三维吃的显存比df丹多一倍
回复 支持 反对

使用道具 举报

1

主题

4

帖子

127

积分

高级丹童

Rank: 2

积分
127
发表于 2024-11-11 20:47:39 | 显示全部楼层
我擦  和我想到一块去了  一直都有这个想法   试了几次无奈电脑实在拉跨   加油期待你的实验结果
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2025-4-10 18:15 , Processed in 0.123242 second(s), 39 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表