deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 719|回复: 8

dst素材脸上有媒婆痣,怎么做才能完美覆盖掉这颗痣呢?

[复制链接]

5

主题

42

帖子

1236

积分

初级丹圣

Rank: 8Rank: 8

积分
1236
 楼主| 发表于 2023-9-8 09:47:51 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
本帖最后由 水月风间 于 2023-9-8 12:35 编辑

dst素材脸上有痣,src素材脸上没痣,训练了很长时间但不管怎么练,最终合成后虽然不是很明显但还是有dst上淡淡的痣的痕迹。

dst素材我也没写遮罩,不存在把这颗痣排除训练的可能呀,合成阶段就算不选遮罩模式脸上的痣还是存在。

我需要src能完全覆盖掉dst的这颗痣,请教大佬们这个情况该怎么解决呢?

补充说明:这颗痣的位置是在嘴唇与鼻子之间(也就是俗称的媒婆痣),不知道痣的位置是否也会影响到训练和合成的最终效果。
另外在训练的最终预览图里也是有痣存在的,换句话说若是能练到预览图里也不显示这颗痣了,合成肯定也不会有了,不知有啥办法可以在训练时就解决掉这个问题呢?


回复

使用道具 举报

15

主题

1936

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
26150

万事如意节日勋章

发表于 2023-9-8 10:46:39 | 显示全部楼层
本帖最后由 come3002 于 2023-9-8 11:04 编辑

对楼主的描述感兴趣。

第一步:1080p 近景。有明显的的痣。切脸WF768
检查debug发现切脸信息位点。包含了这一颗痣的 位置。
3333.jpg
第二步:找df ,liae格式 专丹 零训练直接合成。并调试不同的w,T。找合适的 去掉 痣的参数。
由于没有找到4k。1080p 图片图上为了对比清楚。决定 测试均开T60


第三步:找专丹
实验目的:某liae 专丹,采用不同参数,能否消除DST的人脸一颗痣。

左1 开W,E。T60有明显的 跟DST 一样的痣
左2  不开W,E。T60 几乎看不到一颗痣。
360截图20230908102446119.jpg

第二组实验
某df 格式 专丹。零训练直接合成
左1 不开W,E。只开一个T60
左2  开W,E。也开T60

红圈是 一颗痣。
篮圈是 异常刘海
黄框是  异常黑边。
88888.jpg

结果:
某df专丹,表现不佳
如果不开w,E,隐约还能看到跟 dst类似的颗痣。并且右腮有明显一条黑边线条
线条内的肤色跟线条外肤色有巨大差异。刘海也有颜色差异。
开合适的W,E。则右腮的框消失,肤色接近。但问题是有明显的 跟DST 一样的痣。
liae 表现更好。liae底丹的好处是光影更DST一致。像第一个图中的liae不需要额外的W,E。后来发现这个是坛主 的迪丽热巴liae 为底子 炼制的专丹。


故:仅从已有数据,建议 用liae底丹。
如用坛主的 迪丽热巴liae 底丹,炼一个专丹。像第一个图中的liae不需要额外的W,E即可得到合适的光影。
最大限度不受 DST痣的影响。
(个人观点,仅供参考)



回复 支持 反对

使用道具 举报

5

主题

42

帖子

1236

积分

初级丹圣

Rank: 8Rank: 8

积分
1236
 楼主| 发表于 2023-9-8 12:29:29 | 显示全部楼层
come3002 发表于 2023-9-8 10:46
对楼主的描述感兴趣。

第一步:1080p 近景。有明显的的痣。切脸WF768

感谢兄弟的热心说明,我就是使用坛主的迪丽热巴liae底丹练的,我尝试了一下不开W和E,dst的痣还是存在,这颗痣的位置是在嘴唇与鼻子之间(也就是俗称的媒婆痣),不知道痣的位置是否也影响到训练和合成的最终效果。
另外在训练的最终预览图里也是有痣存在的,换句话说若是能练到预览图里也不显示这颗痣了,合成肯定也不会有了,不知有啥办法可以在训练时就解决掉这个问题。
回复 支持 反对

使用道具 举报

15

主题

1936

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
26150

万事如意节日勋章

发表于 2023-9-8 12:55:14 | 显示全部楼层
本帖最后由 come3002 于 2023-9-8 13:09 编辑
水月风间 发表于 2023-9-8 12:29
感谢兄弟的热心说明,我就是使用坛主的迪丽热巴liae底丹练的,我尝试了一下不开W和E,dst的痣还是存在, ...

你看 我给你的案例 。
别人用 坛主的迪丽热巴为底丹,好好炼,练好了的专丹。零训练直接合成。是可以把痣 掩盖掉的。

也就是说。你要先打磨你的炼丹技术方法。
假设你的是 最终目的用的 DST 女性 樱花xxx 有一颗痣版。
先换一套 杂图 国内女性 樱花女性 ABCDEFGH。注意看一下, 脸上没有 一颗痣。把你是专丹练好后。
对 DST 有一颗痣版樱花XXX。零训练直接合成。即可
回复 支持 反对

使用道具 举报

5

主题

42

帖子

1236

积分

初级丹圣

Rank: 8Rank: 8

积分
1236
 楼主| 发表于 2023-9-8 13:39:44 | 显示全部楼层
come3002 发表于 2023-9-8 12:55
你看 我给你的案例 。
别人用 坛主的迪丽热巴为底丹,好好炼,练好了的专丹。零训练直接合成。是可以把痣  ...

明白了,您说的这个方法确实是可以完美解决掉这个问题,好像也的确没有什么其他方法可以让这颗痣不影响训练了。
回复 支持 反对

使用道具 举报

5

主题

241

帖子

5420

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
5420

万事如意节日勋章

QQ
发表于 2023-9-8 13:50:14 | 显示全部楼层
本帖最后由 Mrdeepfake 于 2023-9-8 14:25 编辑

liae 架构对光影处理好。它可能把痣当作阴影了。你 Liae 丹越好,训练越充分,最后合成后这个痣的位置黑色残留也会越显著。用 df 架构,可能这一问题会减弱一些,甚至有可能几乎看不到痣。

还有一个办法可以试试,画 XSeg 遮罩,把 dst 痣排除在外,排除面积范围要大一些,距离痣要有些距离;然后训练 XSeg 遮罩模型并应用,之后训练 SAEHD 模型;最后合成时,用普通包含痣的 XSeg 遮罩模式。也许能减轻合成痣残留。这种方法没测试过,你需要自己承担风险。

还有一个可供选择办法,那就是你用第三方视频编辑软件,用磨皮、美颜之类的功能去掉痣,但带来的副作用是 dst 脸与合成脸清晰度会有所下降。也可以用 AE 等高级视频剪辑软件,我记得金鱼高级合成教程里,有教过怎么局部地去掉这种痣,这样对脸的其他部分清晰度不会有什么影响。

你自己斟酌选一选,测试一下。第二种方法除了要求你手动画包围痣的遮罩外,你若没训练 XSeg 模型技巧,可能训练好 XSeg 模型会需要很长时间。我个人有些小技巧,各种困难 XSeg 遮罩模型能很快收敛。像你痣的这种情况,也许10分钟以内就能训练好。但目前这种小技巧还只是私用,目前并不打算公布。我觉得第二种方法成功率还是蛮大的。若你不能用第三方视频剪辑软件很好地去掉痣,对 AE 操作也是小白,手头又没有趁手的 df 模型,不妨试试第二种办法。虽然费些功夫与时间,但一劳永逸。

回复 支持 反对

使用道具 举报

5

主题

42

帖子

1236

积分

初级丹圣

Rank: 8Rank: 8

积分
1236
 楼主| 发表于 2023-9-8 14:16:08 | 显示全部楼层
Mrdeepfake 发表于 2023-9-8 13:50
liae 架构对光影处理好。它可能把痣当作阴影了。你 Liae 丹越好,训练越充分,最后合成后这个痣的位置黑色 ...

你说的画遮罩把痣排除在外应该不行吧,画遮罩可以让这颗痣不参与训练,但最后合成的时候是会把你画遮罩的这个部分完整保留下来不换的,这不就本末倒置了,我是要完全覆盖掉痣而不是完整保留。
回复 支持 反对

使用道具 举报

5

主题

241

帖子

5420

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
5420

万事如意节日勋章

QQ
发表于 2023-9-8 14:20:49 | 显示全部楼层
水月风间 发表于 2023-9-8 14:16
你说的画遮罩把痣排除在外应该不行吧,画遮罩可以让这颗痣不参与训练,但最后合成的时候是会把你画遮罩的 ...

你没理解我的意思。你合成时用的正常 XSeg 遮罩是会把痣的范围包含的,并不是为了排除痣的范围而专门训练的 XSeg 遮罩。
回复 支持 反对

使用道具 举报

0

主题

24

帖子

1120

积分

初级丹圣

Rank: 8Rank: 8

积分
1120

稀奇古怪节日勋章

发表于 2023-9-9 06:39:30 | 显示全部楼层
训练时用遮罩排除痣,这部分皮肤会被干净地自动弥补上。不想要什么,就上遮罩给蒙上,不让训练知道。
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-9-24 00:32 , Processed in 0.117056 second(s), 10 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表