发个远古女神src训练的半成品，请教几个问题

dfllearner

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:NAN  参与人数:0  我的评分:未评

src是这个 https://dfldata.cc/forum.php?mod ... 5009&extra=page%3D1

模型是外网下载的一个免费256模型，自己训练了10w迭代。其实半成品都不算，最多算毛胚。
dst视频是一段1080的视频


==     Current iteration: 102571                   ==
==                                                 ==
==----------------- Model Options -----------------==
==                                                 ==
==            resolution: 256                      ==
==             face_type: wf                       ==
==     models_opt_on_gpu: True                     ==
==                 archi: df-ud                    ==
==               ae_dims: 256                      ==
==                e_dims: 64                       ==
==                d_dims: 64                       ==
==           d_mask_dims: 22                       ==


附上合成后的视频截图，现在最困扰我的是这个面具感，X、W、E几个键我来回试了都不完美。我用320分辨以上的模型合成后的面具感都不明显，同样的src在256模型上就非常明显。
这个面具感是因为我训练次数不够，还是模型的分辨率问题， 还是其它原因？如果是src的问题，那解释不了同一套src为啥在320以上模型就面具感就近乎消失了。
         

dfllearner

come3002 发表于 2023-7-14 08:34
同样的底丹（自闭2.0 256 ）。相同的默认参数 有的面具感严重如 李一桐（ 200w迭代）。有的面具感轻微 如 ...

很专业很详细，多谢了。“自闭”是啥意思？

seancai110

因为这个老外脸大。。这种情况开随机扭曲可以解决。但是训练成型会更慢。一开始还会更模糊

dfllearner

seancai110 发表于 2023-7-14 05:44
因为这个老外脸大。。这种情况开随机扭曲可以解决。但是训练成型会更慢。一开始还会更模糊 ...

刚看了下summary，我开了随机扭曲的。256分辨率是不是个问题？我还在犹豫要不要在这个256模型上浪费时间了

seancai110

dfllearner 发表于 2023-7-14 05:47
刚看了下summary，我开了随机扭曲的。256分辨率是不是个问题？我还在犹豫要不要在这个256模型上浪费时间了 ...

很多神丹遇到脸大的dst，都会这样对不上。只有那些充分训练过东亚女性的丹，才会比较完美贴合脸型。

dfllearner

seancai110 发表于 2023-7-14 05:56
很多神丹遇到脸大的dst，都会这样对不上。只有那些充分训练过东亚女性的丹，才会比较完美贴合脸型。 ...

脸大就没办法了 我也是随手找了个视频做实验，没考虑脸型的问题

ccctttccct

第一个图像的表情对不上

dfllearner

ccctttccct 发表于 2023-7-14 06:27
第一个图像的表情对不上

可能是老外的原因吧，这女的好多表情很夸张，看视频听她讲话不大会留意，截取了图像逐帧看就很明显，平常亚洲人脸上很少见那些表情。

come3002

dfllearner 发表于 2023-7-14 06:48
可能是老外的原因吧，这女的好多表情很夸张，看视频听她讲话不大会留意，截取了图像逐帧看就很明显，平常 ...

对楼主的怪异表情图1 放大，截屏，切WF768
零训练直接合成，默认参数（如图 我一个都没动）


论坛几个 专丹
1   李一桐 自闭2.0   无gan
2.  林允儿 自闭2.0   
3.  古力    自闭2.0
4. 江疏影 liae 224 坛主转的
5. 放大对比












大多数在默认参数下都有面具感。
李一桐无gan版颜色有异常。不清楚原因（换脸4K孟子义 时候没遇到 ）


发现有些不对劲
放大看 更多细节 。
右上 自闭古力和左下 自闭李一桐 能看到 下牙齿（古力下牙齿明显，李一桐嘴唇纹理更优秀）。
左上 林允儿的 左腮（实际的右腮） 有明显虚影，看不到下牙齿
右下，江疏影liae 笑容细节优秀，但看不到下牙齿，右脖子（实际的做脖子）不对劲。好像不仅换脸，还换了部分脖子。

come3002

dfllearner 发表于 2023-7-14 06:48
可能是老外的原因吧，这女的好多表情很夸张，看视频听她讲话不大会留意，截取了图像逐帧看就很明显，平常 ...

同样的底丹（自闭2.0 256 ）。相同的默认参数 有的面具感严重如 李一桐（ 200w迭代）。有的面具感轻微 如林允儿；
不同底丹，有的开gan也还有面具感 江疏影liae GAN；当然也几乎无面具感 如自闭2.0 古力。
水平有限，仅仅几张图片，我反推不出对方是怎么炼的（比如是否开扭曲啊）。但通过同一帧，默认参数对比，获取了一部分有用的参考信息。


默认参数看，但迭代高（李一桐200w）、开gan（如江疏影） 也不一定面具感就消失。
因此，大概可以得出结论
1.  256 model如自闭2.0 底丹下，是可以做到无面具感的。
2.  默认参数下的面具感，跟模型的分辨率关系不大。跟迭代数量也关系不大，跟gan也关系不大。可能跟炼丹某些其他细节有关。

（个人观点，仅供参考）


下图1为 截屏原图。
下图2到图5为 不同丹默认参数下 merged文件下得到的png。