炼丹步骤记录，成品丹训练

hu609047601

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:5  参与人数:2  我的评分:未评

建议一直开着梯度剪裁，这个是起到防止模型崩溃作用。有可能会限制模型的变化速度但是避免直接性炸丹（比如大白屏，脸部出现一块一块的色彩）建议搞高清，角度齐全，表情齐全，的dst来跑步骤效果很好
第一阶段1：开遮罩训练   SRC素材不足开SRC随机反转（脸部有特征不要开），DST随机反转开 样本随机扭曲开 梯度剪裁开，其它都关闭
出现脸部轮廓比较清晰，相似即可，停止。
第一阶段2：开学习率下降，开遮罩训练，DST随机反转开，样本随机扭曲开，其他全关
训练一段时间，当看LOSS值下降得很慢或已经陆续有反弹迹象时为止；第一阶段可以结束（绿呗丹3-5W代送就基本差不都了）
第二阶段：开遮罩训练，开眼睛嘴巴，开侧脸，其他全关，包括SRC,DST反转。特别关学习率下降，随机扭曲关。出现拉胖，脸型不对，开真脸0.001
开背景风格0.001（真脸背景自己掌握，我一般都是2000停止一次就是假如之前跑了10W设置目标代送102000）
第三阶段：备份之前的模型，开遮罩训练，开学习率下降，开gan0.1，开梯形，其他全关！全关！全关！重用要的事情说三遍！这里我自己是，假如之前跑了10W代送，开模型参数时候我会设置目标代送次数一般我都是2000停止一次，（就是设置目标代送102000）然后看图的结果，不行把这次102000的给备份下，再往上设置2000，直到满意即可。
由于我是3060 12G 显卡，绿呗256dffd-F模型，第一阶段4BS，第二阶段8BS（可以跑16但是代送速度太慢了值降的也慢）第三阶段16BS
由于滚石大佬，和随风大佬发的都是缩写，让我纯汉化的一脸懵逼，纯英文的也看不懂-.-，自己弄了个对照表吧、
英文版对照
SRC随机反转：Flip SRC faces randomly
DST随即反转：Flip DST faces randomly
遮罩训练：Masked training
眼嘴优先：Eyes and mouth priority
侧脸优化：Eyes and mouth priority
模型和优化器运行在GPU上：Place models and optimizer on GPU （推荐一直打开）
启用 AdaBelief 优化器?：Use AdaBelief optimizer?（推荐一直打开）
学习率下降：Use learning rate dropout
样本随机扭曲：Enable random warp of samples
真脸：True face' power
背景风格：Background style power
SRC 色彩转换模式：Color transfer for src faceset（建议RCT或者LCT，none也行只不过合成色彩不会那么像其实开也没多大作用）
启用梯度剪裁：Enable gradient clipping（这个应该可以一直打开，因为我就是，主要防止模型崩溃用的）
模型练好后，我一般开遮罩，眼嘴，侧脸，背景风格。去整小视频。效果会越来越好，大概玩个20-30个视频后模型清晰度就会变差了，因为一般玩的人都是去搞小视频，那清晰度就不说了，一般也搞不到高清，超清的小视频。DST里喂的太多不咋清晰素材后，模型就会变的和DST里的清晰度一样。经无期大佬所教导，就是把模型练傻了，成了人工智障。在效果最好的时候的模型备份就行，以后变差了，就把备份拿出来。不要过于追求代送次数，效果好就行了。（本人就是太追求代送次数把模型搞坏了，不停的换DST模型想搞个200W代送结果模型就想一坨翔）
整合不宜，随机打赏把

hu609047601

梯形建议一直开着，这个参数是防止模型崩溃的，不会消耗太多显存。我自己用绿呗256F的丹跑的代送数

第一阶段5W代送降不下去后，开启学习率下降跑了5W彻底下不去了，开始跑第二阶段，
第二阶段跑9W值也降不下去后，我小开真脸0.01,和背景0.1，1W代送下不去后
开GAN,和学习率下降。这里我跑了不到10W，（大家自己掌握GAN过头，会出现脸部五颜六色，或者炸丹就是大白屏）

（建议搞清角度齐全表情齐全的dst来跑步骤效果很好）

xswpp

学习观摩一下各位大佬！！！！

hu609047601

这里整合这些真要感谢滚石大佬和随风大佬，还有金鱼大佬的整合结果

1234qwer111

买个你的新建文本文档，支持下，喜欢这种经验帖，就算基本的原理知道了，但是从这种文章中还是能总结出很多经验。

congxin

感谢分享

忘忧之人

学习了学习了

18980253037

我给你的想法一样，就是过分去追求迭代次数了，以为训练次数越高越好，不过既然是换小视频那也不怕，小视频DST都不是很清晰的，我觉得一样可以用

lonvision

感谢分享经验

1234567xy

请问第三阶段眼嘴 ，侧脸，真脸这些设置，还要继续打开吗？