模型训练求大神指教

fghfdg

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:NAN  参与人数:0  我的评分:未评

各位大佬，我用888大佬最新的mve合体版预训练了一个模型（大概230万迭代）转正训之后遇到的问题：

1 在扭曲阶段总会有有些loss异常大（若是扭曲时候开了嘴巴优先或者眼睛优先则不会出现这种情况）。若是在扭曲阶段开了重复训练模型在迭代半小时后容易炸丹。（同上（若是扭曲开了重复训练时候开了嘴巴优先或者眼睛优先则不会出现这种情况））

                              

（第一次从预训练转正训大概4万迭代，bs10）

（第二次，从预训练转正训迭代3.8万次，bs10)

2 开学习率阶段是否开嘴巴优先或者眼睛优先都不会出现loss异常变大的情况，开重复训练也不会炸丹

3  在扭曲阶段总会有有些loss异常大的图片应该不是大角度图片，大俯仰角能训练出嘴眼的(不同src训练20万迭代的时候）

模型训练完合成也是正常的（20万扭曲+10万学习率的效果）：

wtxx8888

不定期跳高一下，是告诉你，扭曲过度了、
这是因为，你从来没有关过。训练遮罩内人脸。
看你的预览图，就是，从来没关过。
话说，ICE的教程里也写过，一段时间后，关闭 【训练遮罩内人脸】， 跑几千。
外面的颜色，都聚到一起了，就容易炸。（不是必炸，但，是个隐患）
另，开某个优先后状况消失，那是因为优先，会限制扭曲的幅度。

fghfdg

wtxx8888 发表于 2025-5-11 12:30
不定期跳高一下，是告诉你，扭曲过度了、
这是因为，你从来没有关过。训练遮罩内人脸。
看你的预览图，就是 ...

感谢大佬解答

dfl9999

wtxx8888 发表于 2025-5-11 12:30
不定期跳高一下，是告诉你，扭曲过度了、
这是因为，你从来没有关过。训练遮罩内人脸。
看你的预览图，就是 ...

高loss重训权重10或者15，重训次数设置为1训练到千万以上都不会炸丹，重训次数设置为2或者以上必炸，默认设置的重训次数是10……应该还是有点门道在里面的。

wtxx8888

dfl9999 发表于 2025-5-12 21:03
高loss重训权重10或者15，重训次数设置为1训练到千万以上都不会炸丹，重训次数设置为2或者以上必炸，默认 ...

他截图，是最新的，改过算法的高LOSS，是炸不了的。

dfldata1316

道友 分享一下DST训练集呀~

才发现我买过你的模型和训练集~ 60G太大了~
啥时候出个10G左右的轻量板呢，保留老师些的。