直接用的论坛里的底丹是不是训练时就不用改参数了？

slib

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:NAN  参与人数:0  我的评分:未评

在想要做出更精准的视频道路上成功的把自己弄迷糊了

因为预训练时已经走过从浅到深的学习过程了，在正训练，也就是实战环节如果再走一遍改参数的过程是不是会导致丹的质量变低，所以猜想是不是直接用预训练底丹最后训练完成时的参数进行正训练就好？由此贴里，训练时要求不改动他的训练参数不然质量会降低，我才想出的猜想【6.11高质底丹】使用声明320 8G df-ud 纯东方女性WF1024-【DFL】模型分享-deepfacelab中文网 - Powered by Discuz! (dfldata.cc) 求大佬讲解

come3002

楼主需要了解一个词 信息污染。

楼主想提高效率，并想尽可能减少信息污染；只看参数远远不够，还要看 SRC、DST和参数等组合。
坛友大多数做女丹。就以女丹分析。
第一种情况：
底丹 欧美东方男女老少都训练过（某些数据集以欧美为主 东方年轻女性仅仅占 1/10-1/20）。你炼专丹要做 某国内年轻女星SRC专丹并给樱花啊中国年轻女性换脸(属于东方年轻女性)。那么污染信息 大约占 9/10-19/20（也就是说数据集绝大多数信息，比如男性胡子，欧美壮男的满脸疙瘩 等是用不到）
（男的长胡子跟女的不长胡子）需要用从本质上彻底覆盖。

假如底丹虽然到了细节学习阶段。但是此时的主要矛盾是    彻底覆盖掉 大量的男性信息。那么用默认参数学习，可能彻底覆盖效果不一定好。
建议用坛主的步骤一步一步走（如果是liae底丹 还要记得删AB）。此做法掩盖底丹的污染信息为首要任务（毕竟比例太高了），并写入新的东方女星信息（ 在底丹比例很低）
（注意：同时此时DST 一定不能用某些数据集做DST。因为DST是可以写入model中的。那么男性胡须，欧美的满脸疙瘩啊都是纯纯的污染源
左上 某女星专丹 发现炼出了男性的胡须。）





为了确定该女星本人有没有胡须。我去找了图片。
发现其本人几乎看不到胡须。



（分支）：假如你 想给东方女星换到 欧美女性身体换脸。

建议 你有 一个特别擅长 张大嘴巴东方女星SRC（看过 欧美片的懂的都懂）。
用坛主的步骤一步一步走。SRC是 张大嘴巴东方女性；DST 是 张大嘴巴东方女星东方女性 加 欧美年轻女性包含大量长大嘴巴的图片。掩盖底丹的污染信息为首要任务（毕竟男性胡须啊 欧美男性的脸上斑点比例太高了），并写入新的大嘴巴东方女星/ 欧美女性信息
（注意：同时此时DST 一定不能用某些数据集直接做DST。因为DST是可以写入model中的。那么数据集男性胡须，欧美的满脸疙瘩啊都是纯纯的污染源



第二种情况
假设：底丹 只训练过 年轻女性（一张欧美的，一张男性的 老人的 都没用）。你炼专丹巧了也做某年轻女星SRC专丹，将来给 樱花啊等年轻女星换脸。
那么污染信息 就换了（也就是说 虽然都是国内明星，骨骼啊等也比较接近，都是女人，年轻女人。但是世界没用两片相同的叶子人不同，总有一些细节不同，这些不同就属于污染信息）
那么这种污染信息相比 第一种 污染相对差别小一些（男的长胡子跟女的不长胡子）。但跟细致一些。不用从本质上彻底覆盖。

因为默认参数下已经到了细节学习了。
建议用同一女星的既做SRC也做 DST 。进行对炼。默认参数（无gan），效率比较高。


（注意：多次测试 6.11 一定只能用跟同一个女星既做SRC也做DST 对炼。因为此时已经到了细节学习了。快速写入更多的 一个女星细节信息是首要问题。而底丹中其他女星的细节信息此时充当了污染信息。


此时更不能用樱花等污染信息做DST（此时的樱花就是纯粹污染信息了）。
有坛友发现 6.11用 樱花做DST，。发现第5栏 炼出了樱花的特征）
（个人观点，仅供参考）


附录：





京香老师年轻时候模糊远古视频居多。现在有4k了但是老了满脸的褶皱。
大为可惜。如第三列 上图 看 原图 京香老师人脸模糊，牙齿模糊。

到了 第四列 上图 京香老师 没想到比第三列 牙齿还清晰。同时皱纹消失了。好像年轻了20岁。（底丹87w，坛友练到了88w）
像京香老师这样的老牌老师还有几位，本来我要放弃 京香老师她们的。但看到坛友右上角 3列 4列这一对比。


这让我对 依然奋战的京香等老牌老师们和6.11 这个组合。有了一种意外想法）

slib

come3002 发表于 2023-7-24 10:29
楼主需要了解一个词 信息污染。

楼主想提高效率，并想尽可能减少信息污染；只看参数远远不够，还要看 SRC ...

太强了，谢谢大佬的详细解释，因为我显卡有24g的显存，论坛内很多分享出来的底丹用默认参数容易跑不满性能，所以感觉有点浪费了。现在我已经找的都是专门的女性底丹，那我可以在原先参数上开启gan 拉高bs训练吗？

come3002

slib 发表于 2023-7-24 11:50
太强了，谢谢大佬的详细解释，因为我显卡有24g的显存，论坛内很多分享出来的底丹用默认参数容易跑不满性 ...

6.11 我用 远程 3090 24G 跑 古力专丹，也是先用默认参数（ bs也是默认4） 对炼跑一段时间。因为让软件和model用近乎原始条件跑，这样先适应你的新的素材。然后再考虑改还是不改bs。（没测试gan）
论坛其他女性底丹/专丹我 都是拿来直接合成，不去跑。大约下了40多个论坛专丹。
相同参数 零训练直接合成。开相同W、E、T。 实战对比中学习别人 的优点 ，有的 大嘴巴好（比我古力好，说明我要找 古力大嘴巴片段），有的暗影光影一绝（比我的古力好，说明要找 古力 暗影的 光影片段）。有的下牙齿特别棒（说明我要 炼古力下牙齿）。（一些场景对比图片，不能上传论坛）

对比时候要尽量找 4k 近景并 放大，能看到更多细节。
4k近景切WF1536


4K近景切WF1536 （大多数到这个程度即可）
左1 论坛下载 448 dfud512  88 88 28                   （不清楚）              累计不清楚
左2 6.11 87w 320 dfud 352 96 72 24 转 古力专丹（对炼大约30-40w） 累计 122w
左3 自闭        256 dfud 320 88 66 22 林允儿       （不清楚）               累计 不清楚
结果 左1  的细节更清楚，嘴唇纹理最好。但看不到下牙齿
左3 嘴唇纹理不错，能看到上牙齿，但看不到下牙齿
左2 嘴唇纹理不错，能看到比较好的上牙齿，也能看到下牙齿

结论：越是近景，像如图的 4k 近景WF1536 越大模型比如448这个越占优势。
但是如果是中远景能大多数场景，448 在 中远景阶段优势就不是很大。
一点想法：
4k 60fps 樱花国（更多的主流还是1080p）是 3840x2160，樱花国你大多数看到很多都要有上半身吧。我估计了下，看上半身时候人脸切WF1024就够用了）。少量跟我刚截图的近景WF1536。

因此，合适的model 配合合适的SRC（尤其男友角度时候 下牙齿作用极大），炼练就要检测，10w、20w、。。。。
某一阶段能在 多数场景 （访谈、浴室、灰暗、闭眼大嘴巴露下牙齿仰角，）骗过你的眼睛即可。
相反，一味求大模型（比中等的模型更难炼），一味训练。忽视及时检测 。等炼的差不多时候你会发现尤其SRC男友角度时候 下牙齿一直不好。总是哪里不对劲，再去找补就麻烦了。此时，越成型的大模型，越难覆写信息。

qdpushaver

一直就有这么个疑问，为啥大家都是练女性丹的多，是有啥能变现的手段吗？

come3002

CC857罗 发表于 2023-9-7 09:53
就是换着玩吧 你懂的

每个人需求不一样。
有的玩直播换脸。坛主的商业数字人为典范，大显存，大模型，liae侧重优质光影 。
有的人要求 SRC还原度高。大显存，大模型，512模型古力跑了2个月了 loss 0.3，准备出优质专丹。
有的人 换着玩。小显存。炼练就找男友角度实战。若巧了找到合适的DST，实战测试效果不错就能停。

come3002

CC857罗 发表于 2023-9-7 11:08
大家所说的写入遮罩是什么意思哦，大佬有时间可以详细说一下嘛，遮罩不是在合成最后使用吗。。。素材提前 ...

坛友那个需要写入万能
毕竟。坛友用的高圆圆素材是我切的（之前用自闭2.0 也跑过）。他用的底丹也是我的6.11. 87w开始跑。
包括炼制顺序，海选 樱花DST也是听从我的建议方法。

写入的具体方法“举例
第一步 万能放入model文件夹
第二步 猫版汉化，写入万能


（其他人的底丹，其他人的素材跟我不同。方法不可一概而论。
多听用过 类似底丹 类似素材的人的使用方法）