记录贴,自练DF-UD416WF416-80-80-32从0开跑预训练,半年后见

itqzja5

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:NAN  参与人数:0  我的评分:未评

小白从0摸爬爬打，自练了几个半成品中途一直在不断调整，感谢论坛各位大佬耐心的指点，感谢众坛友提供的素材及经验。自用PC配置允许的最高参数从0开跑预训练。此贴记录此丹进程











10W迭代



45万


136W迭代




200W开嘴眼继续





253W

come3002

yxyao 发表于 2024-4-15 09:43
谢谢大佬解答，我还有一个关于src分辨率的问题，比如我的丹是256分辨率，512-96-96-32参数，为了避免cpu ...

如何搭配，模型分辨率(256/288/320/384)，四维(有的高AE)，又如何resize。多是一些老手的经验总结。但是这样的经验是由他精选的素材，按他的用途反复打磨而来。
他们的经验再好，你用的跟他不一样级别的素材，是无法达到他们的效果的。故也要因素材而已，因用途而异。
只说素材一方面。
他们用的图片素质比如WF1024 几乎每一张能看清嘴唇纹理的高清 /使用的高参丹，一般压缩resize 比模型分辨率高一些，能保留更多细节。
举例（这套src里最高就是18-20道嘴唇纹理，如下图）



五彩352dfudt训练（无gan），找一些DST合成检测，炼制后感觉合适我就停了。
如下图的右图是合成效果。放大了400%。只看嘴唇纹理大约能看到 12道嘴唇纹理（由于这套src里最高就是18-20道嘴唇纹理，大约能看到SRC的 60%程度嘴唇纹理）我觉得够用基本就可以停了。

假设你的SRC素材很一般，图片素质比如WF512 略模糊占多数，看清嘴唇纹理等细节高清极少。炼制底单/专丹，resize到模型分辨率或压缩略高没有什么区别的。

come3002

yxyao 发表于 2024-4-14 12:26
多谢，那这个参数基本上就是dfl构建一些dst中缺乏src的场景的能力， 而不是记忆、还原src细节的能力，对 ...

两者都有。底单训练和正训两部分。抽不到正训匹配的，就抽底单训练的。
比如转正训 张三时候，用的是 迪丽热巴liae224，SRC只有张三正脸，训练后合成 合成相同光影相同表情的正脸的是最后训练得到的张三的正脸；
但是如果遇到相同光影相同表情侧脸的樱花的时候，由于正训没有提供侧脸。抽取不到，那么最后没办法抽取的是学习到的底单中 相同光影相同表情相同角度迪丽热巴SRC 的信息。

结果就是 正脸是张三，侧脸是 有迪丽热巴痕迹。

当底单强大，正训弱（角度弱，光影弱，表情弱），越明显（故 迪丽热巴坛主的liae 有坛友选择要 删除AB）；
正训强，正训强（角度全，光影多，表情多），则要好的多，适当训练可以覆写底单信息。

come3002

yxyao 发表于 2024-4-14 11:14
请教一下大佬，384分辨率，384/96/96/32 和 768/96/96/32有什么区别（后者有优势吗？）
因为我看到有的人 ...

看你的用途。
理论上，假如你的每套SRC角度，光影，表情，细节理论上极致非常丰富跟 DST角度，光影，表情，细节丰富度相同， 非常贴合。
具体上说，4k近景樱花DST一个抬头1秒  ABCDEFGH ，能SRC  ABCDEFGH。要每秒逐帧切割。
（理论上做到1v1 换脸的精致）。几乎不依赖dfl脑补一些内容。两个都可以。
实际上，如果4k近景樱花DST一个抬头1秒，不是你自己严格要求切割的。而是论坛下载的 一般质量的SRC或 过分去重的（只有A和H，缺失了BCDEFGH）。推荐用 高参（不一定要高到700）。需要AE高 来帮助dfl脑补一些内容出来。更流畅贴合。
具体什么参数，推荐可以参考从论坛下载 坛主 224刘亦菲liae512/五彩320liae512.
用你的自己切的WF1024 一套每套SRC角度，光影，表情，细节理论上极致非常丰富单人素材，用你的DST数据集跑跑试试，找樱花等测试效果。
记录炼制经验。推算 需要什么样的DST数据集，数量，角度，光影等都要考虑。
然后再根据经验去改参数，设置最佳的参数组合，用积攒的DST数据集，数量，角度，光影去跑就可以了 。

come3002

itqzja5 发表于 2024-4-13 17:11
佬  问下  Lau9是???没听说过额

RTT中缺陷的图片删掉，对炼丹也很重要。



deepfacelab中文网»首页›
›【预训练】FFHQ+RTM 缺陷图

wtxx8888

itqzja5 发表于 2024-4-13 09:44
感谢大佬目前已经迭代4.6W了，还是一片糊，损耗降的一直很慢我想搞一个高迭代通用底丹，大佬所讲的炼制历 ...

这才刚刚开始，LOSS下降的耗时是递增的。LOSS越低，耗时越久。。。
后面要挂上很多天，才会看见LOSS动一点。。。。

come3002

itqzja5 发表于 2024-4-13 09:44
感谢大佬目前已经迭代4.6W了，还是一片糊，损耗降的一直很慢我想搞一个高迭代通用底丹，大佬所讲的炼制历 ...

人脸信息位点需要借助工具查看。
论坛里的Fanda 快切2.0支持导出信息位点。查看信息位点详情。
看图像 你用的是RTT数据集，Lau9更新过去除错误信息位点版，能节省时间。

丸丸

扭曲是必开的

bbking2018

半年后出新版本lab咋办？

wzx945

这么有决心吗？但也不必跑半年吧？

我也从头开始练了一个丹，虽然没有416这么高的分辨率，但320也差不多够用了。

如果不是打算直接自练一颗超强的底丹，只是练专丹的话，真没必要练很久。我那颗320的丹也只不过跑了一个多月罢了，现在清晰度也已经快到头了，参数比你这个416还高点呢。普通人一般也就练几颗专丹就够了，真没必要长时间用杂图扭曲跑底丹。

itqzja5

bbking2018 发表于 2024-4-13 00:34
半年后出新版本lab咋办？

那我也认了 现在跑上  等想起来就瞅一眼  反正闲着也是闲着

itqzja5

wzx945 发表于 2024-4-13 00:43
这么有决心吗？但也不一定跑半年吧？

我也从头开始练了一个丹，虽然没有416那么高的分辨率，但320也差不多够了...

嗯我是想弄个万能底丹扔那让他跑看看能出来个啥,我没开扭曲  不知道有没有必要开扭曲

itqzja5

丸丸 发表于 2024-4-13 02:43
扭曲是必开的

已开扭曲  

come3002

初学阶段推荐用256以下模型分辨率。
理由

1.低模型分辨率炼制快
能快速熟悉练丹基本步骤
2.转专丹快
正式训练转专丹，及时的樱花/舞蹈等镜头，反复打磨src，整理出合适的全角度src，光影丰富，表情丰富的src素材。
3.能早接触 早处理诸多问题，积累经验

等有经验了再换高模型分辨率丹即可

itqzja5

come3002 发表于 2024-4-13 08:10
初学阶段推荐用256以下模型分辨率。
理由

感谢大佬建议,我在整一个预训练丹,只开了遮罩训练和扭曲  没有其他操作  除丹的参数不确认是否合理,其他估计不会出啥问题

come3002

itqzja5 发表于 2024-4-13 08:29
感谢大佬建议,我在整一个预训练丹,只开了遮罩训练和扭曲  没有其他操作  除丹的参数不确认是否合理,其他 ...

需要很多步骤。
有的喜欢洗迭代，有的喜欢，预训练转正训不洗迭代。
素材有的喜欢每一张都高清，有的喜欢加点模糊。
有的喜欢信息位点错误的剔除。有的喜欢大杂烩一起炼制。
有的喜欢泛化能力强比如随机扭曲一开到底，


不清楚你的素材是不是高清，有没有错误信息位点等无法判断。
每个步骤用的参数用什么素材。需要你去打磨。
建议你封存这个416丹。
用你准备的素材用相同参数跑小点的。
比如
Dfud 256 352 88 80 22。/256 384/96/96/32等