融脸眼睛老闭不上怎么办

ulu

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:NAN  参与人数:0  我的评分:未评

没开嘴眼，df 模型。
dst完全闭上时候融脸，合成出来眼睛还是睁的，是因为 训练中闭眼的图太少吗？把闭眼的 src 复制几份能解决吗?
训练的 dst 也要加闭眼素材吗？
求助

come3002

训练中闭眼的图太少吗？把闭眼的 src 复制几份能解决吗?
训练的 dst 也要加闭眼素材吗？

==============
DFl 本质是 图像转换软件。
以 樱花做dst ，src 用国产电视剧为例。
dst 有 某角度 大量闭眼镜头。那么 你的src 也理论上 也要有 大量的 闭眼镜头 图片才能匹配上。
src 在该角度 没有闭眼 就会抽取 src 该角度 近似的 睁眼的信息。其结果就是比较像但是 是睁眼的效果。


这个也有挽回余地。
第一点。DFL 原版和 wx8888 大佬 6.01 版本等  具有 旋转15°的作用。
即 你的 樱花如果是 大部分匹配较好，有闭眼。但是少量的或某角度 闭眼下 表现不好。导入 刀哥1.4 补角度 或 MVE。查看是 什么角度。
然后 找 src 新的图片。只需要 补充 该 角度 或 15° 以内的（刀哥1.4或 MVE 里 就是 目标格子以及 临近的附近的格子） 闭眼src图片。
src 为 原始 src +新src闭眼图片（dst 临近 角度）。dst 为樱花。训练一会就看看 有没有改善。训练一会有几率训练回来。
优点，加入补完整，最像src。并且你丰富了src闭眼的素材，得到了 更优质的 src包。
将来无论是 256小分辨率，还是 320以上 高分辨率。都可以直接拿来用，一劳永逸。
缺点，具备极高是搜集src 素材能力。电视剧里找 少量的 指定角度的 闭眼瞬间， 仿佛海里捞针。

第二点。借助Ai工具。 工具很强大。如果樱花 闭眼实在是 各种角度都有，而你的src 实在找不到src的足够角度的 对应的闭眼图片。就手动Ai 生成一点点 该 src的 闭眼图 （多抽卡，选择 一致性最好的，多抽点角度，让角度尽可能跟 dst 匹配），做 ai 闭眼包。
src 为 原始 src +ai 闭眼包。dst 为樱花。训练一会就看看 有没有改善。

优点，最快。
缺点，豆包等已经对真人审核很严格；comfyui 对 显存要求较高，12G -24G显存。


左边为 正脸 原始src ，右边是 Ai 下 正脸 一只眼闭眼src。注意抽卡 选最佳。



第三点，复杂场景。
比如 樱花的 大角度仰角 又闭眼 还 嘴巴张大。一般而言 src 几乎  难找到 大角度仰角，更不用说 闭眼 嘴巴张大了。
这样的更麻烦。需要 一点点  抽卡。。。。





第四点。现有工具和图片 再利用的做法。
DFL 原版 +fanda手绘软件。320 等 较高分辨率。
选一部分该樱花dst 假设3000张，从中的闭眼 假设30张，包含了各种角度，先对双眼闭眼区域画遮罩。fanda大佬的 手绘软件 把画的变成 写入遮罩。
命名 闭眼包30张 。此时 闭眼包 由于 遮罩区域就是闭眼双眼。最大可能提高了闭眼信息 又尽量的减少了 污染
之后 src 放入 原始src+30张闭眼包，dst 放入 原始 dst 3000张。训练一会看有没有改善。然后移走 src 中的 30张闭眼。稍微训练一会收丹。
第五列的信息提供，遇到dst睁眼镜头，提取的是是 原始src 睁眼信息；遇到 闭眼 镜头，提取的 是 原始src 人脸+dst的 闭眼。


优点：对电脑要求极低。仅仅需要 dst 的图片即可。不需要 额外找 src的电视剧，也不需要 Ai 生成src的新图片。
缺点：要绘制一部分，废手。



注意：使用时间技巧，该法 效果看 src和dst 脸型相似度高并且眼妆的相似度高为佳 （林志玲 vs 暗黑林志玲 拿来用 都可以） ，推荐 选择 正常眼妆vs正常 眼妆；
你想啊，假设樱花dst 跟原始src 脸型啊 五官啊 眼妆啊 光影啊 相似度100%。可以随便放入；
相反。眼妆不一样等，一般不推荐用。假如src是正常，dst是 烟熏眼妆；合成后 睁眼就是正常，闭眼就是 烟熏眼妆，一会睁眼一会闭眼，连续变化下，就算是256分辨率下也非常违和。
相似度低的时候，利用的是 dst 闭眼 区域。过早放入会 相似度会下降。建议大后期放入。
相似度低的时候，加入闭眼包 训练时长也要越短。


极简版。256模型分辨率，对细节不是很苛求。干脆 不用那么麻烦。
坛主某个帖子 提及，可以利用 dst 直接放入 src。
具体做法。直接 用 30张 闭眼包 dst，放入原始src。
src 为 src+30闭眼dst  vs 3000张 dst。大后期时候，训练一会看有没有改善。有改善后移走 src 中的 30张闭眼。稍微训练一会收丹。
优点：对电脑要求极低，非常简单粗暴。

wtxx8888

原因很多，一般3种。
1。SRC，无闭眼素材。
2。模型 e_dims与d_dims的值  过低。
3。DST的眼珠  点位不准。需要手动改准，切脸默认 是会张开一些的。

另外，训练的迭代不够，也可能不闭眼。这需要 训练的久点。（开启嘴眼优先  或眼优先）
自行测试，到底是哪个造成的，然后 反方向修正。