deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
12
返回列表 发新帖
楼主: WaveBedo

使用A专丹来练B专丹,删ab后,需重置编码器吗

[复制链接]

15

主题

1947

帖子

3万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
31164

万事如意节日勋章开心娱乐节日勋章

发表于 2025-11-3 10:55:19 | 显示全部楼层
WaveBedo 发表于 2025-10-17 02:28
好的
A专丹练B专丹,
众说纷纭,

如果是你自己炼制的预训练DF底丹200w(高清数据集炼制,无随机扭曲);model X
先转了一个DF 刘天仙丹  ,随机扭曲,第五例细节看 能看到部分下牙齿,封存备用,比如100w model A(累计300w迭代,高清数据集炼制的随机扭曲丹,后100w全程没有关扭曲),
当你想 转杨X 丹时候,推荐用 随机扭曲丹100底丹+200扭曲丹; 换成 杨x vs 数据集(高清数据集)扭曲跑就完事了,备份model B。会相对比底丹转 杨x 要快的多。B的杨x 会借用 A 当时的 随机扭曲下的 部分下牙齿,演化 杨x 的下牙齿。从而能很快出你想要细节,节约训练时间。
优势:你自己把握素材质量;借用 A丹的随机扭曲下的  下牙齿等细节传给 B。

如果是论坛下载 底丹 O,别人用O炼制的专丹 A。一般不推荐 A转B法。
一来 别人的 炼制A 过程 src 和dst 信息位点是不是有大量的错误,是不是会导致抖动问题。
二来,A的 src 和dst 是不是有大量 模糊低质量图片。是不是会导致 画质质量下降,尚未可知。


评分

参与人数 1贡献 +1 收起 理由
WaveBedo + 1 感谢分享

查看全部评分

回复 支持 反对

使用道具 举报

15

主题

1947

帖子

3万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
31164

万事如意节日勋章开心娱乐节日勋章

发表于 7 天前 | 显示全部楼层
本帖最后由 come3002 于 2025-11-4 10:43 编辑
WaveBedo 发表于 2025-10-17 02:28
好的
A专丹练B专丹,
众说纷纭,

炼制丹特别费时费力。尤其大分辨率模型,炼制是以数月,甚至上年为单位的。一旦思路错了,金钱是次要的,更重要的是白白浪费青春。
因而建议,多以小分辨率模型做实验,多备份。跑废了也不心疼。如果摸清楚了思路。随时可换成384,448等高分辨率模型。跑就完事了。


我找了8.13 备份的一个 小分辨率 256专丹做了A丹转B丹的测试。
目的:测试已经炼制出下牙齿的A丹转B丹。开随机扭曲下,B丹 第二列和第五例能否比较像 新的src,下牙齿能否较快训练出来。


底丹 256 DF 自炼come5.0 小分辨率模型。
专丹 陈x  256 高清素材炼制,随机扭曲全程开。以出较好的下牙齿备份。240w迭代 8.13 封存 。

SRC,找一份 高清SRC,角度较全,光影丰富,表情丰富。下牙齿也较多。
DST,杂图数据集。


步骤:

只开随机扭曲 ,侧脸,遮罩,bs4,跑一会,观察记录截图。

过程:
1.开始时候,第二列还是有陈X 痕迹。
360截图20251104080250154.jpg
2. 跑了一小会,第二列,能看到有一部分已经有少量的下牙齿斑块(但是没有齿缝),感观上,已经比较像 张x的特征

但是第五例仍不太像src。
360截图20251104085137279.jpg
3. 继续跑,第二列少量的已经有下牙齿齿缝;第二列,第五例也已经比较像src。记录迭代2400590。
耗费 550迭代。
想来继续训练,会更多的下牙齿出现。
360截图20251104084736848.jpg

结果 以利用小分辨率模型底丹自炼出下牙齿的 陈XA丹 随机扭曲丹 ;转张XB丹,随机扭曲下,刚开始第二列和第五例还会有陈x 痕迹。之后第二列慢慢会增加src特征,并出下牙齿斑块,随后 第二列和第五例 慢慢像src, 能在大约500迭代,第二列出下牙齿齿缝。

结论:炼出下牙齿的A丹,再去转B丹;随机扭曲下,B丹 第二列和第五例会越来越像 新的src 特征,同时下牙齿能快速出现斑块,进而出现齿缝,转变过程较好。从而加快训练效率。


一点思路
底丹,专丹A,专丹B。全程炼制有很大的好处。能较好控制,也能摸索其中规律。
总体原则是先易后难。底丹 专丹A,专丹B 质量原则是 高清高清高清+普通。角度、表情等也是如此。

只分析 A和B 素材是有很大差别的。简单的说是  A 高清→B 高清+普通
我炼制时候,A丹 src 很多是 我自己切高清SRC(正脸几乎每一张都筛查),自己找角度更多镜头,表情更丰富,牙齿丰富度和细节比较好。
B 为论坛下载,随便删减(高清+存留一定量的普通),再自己切了一点镜头,补充了一点高清src就跑。整体各个方面可用,但是略有欠缺。
基于上述分析,小分辨率 256 DF模型,随机扭曲下的 A高清→B 高清+普通丹转变过程;以 下牙齿齿缝为参照看,实际就是A丹(高清牙齿素材)已经炼制出的下牙齿齿缝的特征,向 B丹 (高清+少量普通牙齿)迁移。从而弥补B 下牙齿略欠缺的不足,还能短时间内 加快训练速度。

依然建议先易后难。炼制张X B前可以 先炼制一个 容易获得,角度全,牙齿细节更好,论坛里的 杨x,刘x 等等 资源也丰富的素材,做A丹;B是你最终想炼的那个,但是角度不太全,牙齿有是丰富度和细节略逊色。随机扭曲下,把A的牙齿炼好了,就测试转B src训练B丹。(B丹不是硬性直接炼。炼练就测试,遇到问题就暂停,失败就封存。256小分辨率模型 非常快,失败也不心疼)

以此演绎推理,

细节上还是先易后难,先炼制 下牙齿丹练手(不是硬性直接炼。炼练就测试,遇到问题就暂停,失败就封存。256小分辨率模型 非常快,失败也不心疼)
,解决了再考虑难道高的细节炼制 嘴唇纹理,睫毛等;大致推测。当绝大多数问题解决。就凑够了一套 较好  的
B 丹src( 张XB丹 ,也是发现了某问题。才手切了一点镜头补充。发现训练果然有改善。)


严格要求素材质量(B丹 尽量 90%以上是高清),用224-256小分辨率练手熟练后,什么阶段用什么素材,用什么参数,之后怎么改的素材,怎么改的参数,loss下降的快慢,第五列的情况做好记录文字加截图(备份到model 下一个截图 和文字说明);有想法了随时改变加以验证,失败就封存。合适就做主丹继续跑。
当感觉时候成熟了,素材不变下,租远程算力,按照相关的截图和文字说明流程换来炼制416 512 DF大模型分辨率专丹,就可以了。


(注,不同的底丹,不同的src,不同的dst,需要的迭代不同,上述数据,仅作参考)



回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2025-11-11 13:46 , Processed in 0.105380 second(s), 31 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表