deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 405|回复: 8

各路大佬,请假两个问题,这种带眼泪的src图片是否能用呢

[复制链接]

6

主题

32

帖子

3200

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3200
 楼主| 发表于 2024-1-5 14:03:44 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评


1. 脸上和眼睛里都有眼泪,这种情况能当src训练吗,如果训了会影响模型吗?后续换脸后脸上会出现眼泪吗?

脸上和眼睛里都有眼泪

脸上和眼睛里都有眼泪


2. 只有眼睛里面看起来有眼泪,这种情况能当src训练吗,如果训了会影响模型吗?后续换脸后的眼睛会不会也是这种泪眼朦胧的效果?

只有眼睛里面有眼泪的感觉

只有眼睛里面有眼泪的感觉


回复

使用道具 举报

6

主题

32

帖子

3200

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3200
 楼主| 发表于 2024-1-5 15:48:49 | 显示全部楼层
come3002 发表于 2024-1-5 14:48
构建一套src非常需要耐心。基本上要包含你想要的各种角度。刀哥1.0  角度图 90-95%格子。各种表情各种光影 ...

感谢大佬讲解,细节问题目前我有点领悟到了,例如牙齿不清晰就把清晰的牙齿src挑出来单独练,嘴唇会变色,就把嘴唇颜色统一的src挑出来练,这些也都证明了。
唉,就是这个光影是难搞,还没摸清这个对光影要求的上限和下限在哪,模型训出来脸部锐化拉高了脸部某些地方就会偏黑,不拉个20%的锐化,又有点模糊。我的dst和src素材都是自己花时间筛选过的,感觉还行,训练参数都是借鉴大佬们的去练的。小弟我还是得多学习慢慢实践。感谢大佬
回复 支持 1 反对 0

使用道具 举报

15

主题

1867

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
23446

万事如意节日勋章

发表于 2024-1-5 14:48:29 | 显示全部楼层
本帖最后由 come3002 于 2024-1-5 15:03 编辑

构建一套src非常需要耐心。基本上要包含你想要的各种角度。刀哥1.0  角度图 90-95%格子。各种表情各种光影都要准备。
大概思路如下:可以把你的src 全角度 全表情 全光影 先切完。比如5w。先备份一次。
第一步 选出 你认为 去模糊最清晰的一部分,查重 99% 3w张,查重90% 比如1w张。
先用 这1w张 清晰度高的素材做基础包src。配合合适DST,去训练。
第二步 检测。练练就去找你的 dst 检测。日常正常谈话(日常自然光下正脸 ,微微侧脸,侧脸 都测),樱花就测 bed(明亮光影,黄光台灯,偏灰暗),浴室。
第三步。某 哭泣表情 有问题,你想优化下。就去 99%的 3w/原始 5w 中去找 对应角度 哭泣表情。
打包为 “哭泣包” 比如500张。跟 dst中 的 相应 角度 哭泣 镜头做单独训练。
补上去之后练练再检测。如果哭泣帧部分有改进,由于dst是 哭泣 一个 动作,感觉动作表现还是略欠缺。就去5w包里继续找 对应哭泣动作DST是 有略模糊的,那么src 哭泣也要 逐帧保留(略模糊的也要)比如增为800张(哭泣包 带模糊)再训练。练练就检测,直到满意为止。
之后把500张(哭泣包)加入 10000张的基础包 中。
第四步:完成上述后,就考虑细节。比如牙齿有问题。构建“牙齿包”。(牙齿包分 只看到上牙齿的“上牙齿包”,以及能看到 上下牙齿的 “下牙齿包”)
等检测 上下牙齿各个角度都比较满意后。如果发现,发现嘴唇纹理没有出,再去构建嘴唇纹理包(可细分为 不带牙齿的纹理包,带清晰 上下牙齿的 “纹理包”)。分的越细致,补充的越精致也越快。
眉毛 睫毛 等等以此类推。

当然,有的时候 src素材原因到 下牙齿就可以了停了
这样的办法基本就是宁缺毋滥。先突破一个点,再到一条线。之后到一个面。慢慢让丹成长起来(同时也摸索到这个丹 目前已经练好的适合的 dst 脸型 角度 表情 镜头 光影等。以及需要 避开的 尚欠缺的 角度 表情 镜头 光影。)。

光影不够问题。有办法,也是需要耐心。推荐 你看看 坛主的 剪映介绍。
慢慢调,慢慢检测,慢慢增加
deepfacelab中文网»

剪映出了个逆天功能,不愁素材光影不足了  






回复 支持 1 反对 0

使用道具 举报

15

主题

1867

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
23446

万事如意节日勋章

发表于 2024-1-5 14:11:41 | 显示全部楼层
看你的用途。
假如你的用途是 一般正常的谈话,这种图片可以少。
假如你的用途是樱花,而且灰暗,樱花脸上有哭泣眼泪,这种src 镜头 是非常有必要的。
回复 支持 反对

使用道具 举报

6

主题

32

帖子

3200

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3200
 楼主| 发表于 2024-1-5 14:25:33 | 显示全部楼层
come3002 发表于 2024-1-5 14:11
看你的用途。
假如你的用途是 一般正常的谈话,这种图片可以少。
假如你的用途是樱花,而且灰暗,樱花脸上 ...

好嘞
回复 支持 反对

使用道具 举报

6

主题

32

帖子

3200

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3200
 楼主| 发表于 2024-1-5 14:35:21 | 显示全部楼层
come3002 发表于 2024-1-5 14:11
看你的用途。
假如你的用途是 一般正常的谈话,这种图片可以少。
假如你的用途是樱花,而且灰暗,樱花脸上 ...

大佬,那这种灰暗src的素材占比五分之一的话,后面训出来的模型也会偏暗吗,即使我后面测的dst视频光线是较好比较亮的,换出的脸也会出现偏暗效果吗,我不确定有没有这种影响。我前几天训好了一个确实没有这个平台买的佟丽娅模型脸部那么自然亮,那个大佬的佟丽娅模型真是训的好,脸部光线用多种不同光线的视频去换脸都比较自然亮的那种,而且妆也很浓,大佬厉害
回复 支持 反对

使用道具 举报

6

主题

32

帖子

3200

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3200
 楼主| 发表于 2024-1-5 15:52:40 | 显示全部楼层
come3002 发表于 2024-1-5 14:48
构建一套src非常需要耐心。基本上要包含你想要的各种角度。刀哥1.0  角度图 90-95%格子。各种表情各种光影 ...

src素材我是找4k电视剧的,比如韩剧《龙门夷》,这种光影还不够丰富吗
回复 支持 反对

使用道具 举报

15

主题

1867

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
23446

万事如意节日勋章

发表于 2024-1-5 16:07:18 | 显示全部楼层
本帖最后由 come3002 于 2024-1-5 16:08 编辑
Lige 发表于 2024-1-5 15:52
src素材我是找4k电视剧的,比如韩剧《龙门夷》,这种光影还不够丰富吗

光影问题。很多人选用liae模型。
我用的是df,df要分情况。也要看你的 dst检测效果。
df 模型,要尽量1v1 对应关系。 你的 dst 都是 正常的自然光,你src准备自然光为主体即可。
比如一部樱花老师 跟你的src脸型(正脸 微侧脸 侧脸 都很像)2 小时 肯定能切几分钟自然光 镜头出来。那就换练自然光镜头即可。

如果不一致,比如你樱花dst是黄台灯下 光影,巧了src 缺 台灯下 光影。也就是说df你要么改变src 要么 改变dst。
剪映的调整有两个办法 都可以完成
办法1 调整 src 为你需要的 台灯下 光影(参考 坛主的链接,这个比较费力)。
办法2 把樱花的 台灯视频 调光影 为接近自然光。然后再切脸换脸。

办法3. 干脆不要了。反正2小时 一部剧,其他的光影镜头够用
我一般选择办法2.
(这个办法比第一个办法要容易一点)

回复 支持 反对

使用道具 举报

6

主题

32

帖子

3200

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3200
 楼主| 发表于 2024-1-5 18:19:26 | 显示全部楼层
come3002 发表于 2024-1-5 16:07
光影问题。很多人选用liae模型。
我用的是df,df要分情况。也要看你的 dst检测效果。
df 模型,要尽量1v1  ...

学到了,谢谢大佬
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-5-19 01:48 , Processed in 0.099205 second(s), 12 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表