deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
楼主: 魔幻蓝蚁

额头有一块白的训练不到怎么办

[复制链接]

0

主题

208

帖子

4584

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4584
发表于 2024-6-6 02:54:01 | 显示全部楼层
本帖最后由 zpg 于 2024-6-6 02:55 编辑
wtxx8888 发表于 2024-6-5 22:12
默认的F脸遮罩,就是没额头的,
玩2年没用过自定遮罩,你也是没谁了。 ...

那个其实是mf,比f都要小一截,f是包含大部分额头的,只是不包括最上面发际线
回复 支持 反对

使用道具 举报

50

主题

406

帖子

2475

积分

初级丹圣

Rank: 8Rank: 8

积分
2475

万事如意节日勋章

 楼主| 发表于 2024-6-6 09:05:14 | 显示全部楼层
wtxx8888 发表于 2024-6-5 22:12
默认的F脸遮罩,就是没额头的,
玩2年没用过自定遮罩,你也是没谁了。 ...

之前真不会弄遮罩,以为有了镇店之宝就在合成的时候按X转化一下就好了。之前遮罩都没有训练过。
回复 支持 反对

使用道具 举报

50

主题

406

帖子

2475

积分

初级丹圣

Rank: 8Rank: 8

积分
2475

万事如意节日勋章

 楼主| 发表于 2024-6-6 09:06:31 | 显示全部楼层
come3002 发表于 2024-6-5 23:18
目前看是SRC和DST的颜色色差比较大

=====================

好的,感谢啊。
回复 支持 反对

使用道具 举报

15

主题

1936

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
26344

万事如意节日勋章

发表于 2024-6-6 09:24:29 | 显示全部楼层

如果测试发现脸部要想跟DST 颜色匹配度差一点,就首先分析DST训练 增加 颜色丰富度。这种是相对容易的。
而如果你的某一帧DST镜头可能人脸嘴巴是灰暗一点,而额头亮一点;或者左半脸亮,右半脸暗,或左半脸暗,右半脸亮,等复杂场景匹配不到位。
就要在增加颜色基础上DST增加一点点 类似复杂光影图。
360截图20240606091911555.jpg
回复 支持 反对

使用道具 举报

50

主题

406

帖子

2475

积分

初级丹圣

Rank: 8Rank: 8

积分
2475

万事如意节日勋章

 楼主| 发表于 2024-6-6 09:34:21 | 显示全部楼层
come3002 发表于 2024-6-6 09:24
如果测试发现脸部要想跟DST 颜色匹配度差一点,就首先分析DST训练 增加 颜色丰富度。这种是相对容易的。
...

也就是说我的素材光影不够丰富吧,都是比较单一的颜色是吗。
回复 支持 反对

使用道具 举报

50

主题

406

帖子

2475

积分

初级丹圣

Rank: 8Rank: 8

积分
2475

万事如意节日勋章

 楼主| 发表于 2024-6-6 09:39:45 | 显示全部楼层
q350555108 发表于 2024-6-5 19:37
src素材写入遮罩:5.XSeg) data_src trained mask - apply  然后继续练10分钟就好了

你好,还想问下,这个src素材写入遮罩,是每训练一个新的视频都需要写入吗,还是说只写入一次就可以了。那DST的遮罩需要写入吗,一般什么时候写入呢?
回复 支持 反对

使用道具 举报

15

主题

1936

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
26344

万事如意节日勋章

发表于 2024-6-6 10:44:49 | 显示全部楼层
本帖最后由 come3002 于 2024-6-6 10:46 编辑
魔幻蓝蚁 发表于 2024-6-6 09:34
也就是说我的素材光影不够丰富吧,都是比较单一的颜色是吗。

颜色和光影是同步的。是liae 可以  model 会学习 DST的光影。这是liae丹的绝活。
如果是 dfudt 需要 可以用剪映 处理下 你切电视剧时候 备份的SRC 镜头,生成一些复杂光影再切脸。

360截图20240606104325986.jpg


360截图20240606104345224.jpg




回复 支持 反对

使用道具 举报

50

主题

406

帖子

2475

积分

初级丹圣

Rank: 8Rank: 8

积分
2475

万事如意节日勋章

 楼主| 发表于 2024-6-6 12:04:32 | 显示全部楼层
come3002 发表于 2024-6-6 10:44
颜色和光影是同步的。是liae 可以  model 会学习 DST的光影。这是liae丹的绝活。
如果是 dfudt 需要 可以 ...

学习到了。感谢啊。
回复 支持 反对

使用道具 举报

15

主题

1936

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
26344

万事如意节日勋章

发表于 2024-6-6 12:41:49 | 显示全部楼层
本帖最后由 come3002 于 2024-6-6 13:00 编辑
魔幻蓝蚁 发表于 2024-6-6 12:04
学习到了。感谢啊。

dfudt比较像 但是光影比较吃亏。故df 樱花换脸首先要考虑增加SRC
第一步:切脸电视剧切的抬头镜头切WF后进行编号。训练一段时间时间就找樱花经典 的 访谈,bed 灰暗,bed 光亮,浴室等 检测。
一般国内电视剧偏光亮居多。换脸樱花偏光亮问题不是很大,不需要处理。而如果国内电视剧缺灰暗,当樱花 转入经典的 灰暗 幽暗 就会有明显色差。
第二步:把你认为特别看中,但是 表现不佳的那一段仔细分析。假如是bed灰暗抬头。导入刀哥补角度,知道大概是什么角度。
你的SRC也跑一次刀哥补角度。把那帧附近9个格子的素材导出,找表情最接近的一帧,根据编号 追溯到 原始电视剧 是哪一集有跟dst这个类似但是光影差别大哪个镜头(哪怕 是沙发光亮 也可以的)。
剪映细细调整该沙发光亮镜头到类似 樱花bed灰暗的感觉。大概能满意为止。
第三步:重新切这个镜头 命名 灰暗HuiA,补上训练就可以了。
将来换另外一个是浴室 表现不佳载体。命名 YuS 依此类推。

第四步:构建 检测用的 专用 DST(起初是 角度 正脸和小角度,光亮访谈、bed,→光亮+你看中的  bed灰暗 → 角度 正脸略多角度 ,光亮+bed灰暗+浴室,光亮访谈→正脸尽可能多的包含极限角度,光亮+bed灰暗+浴室,光亮访谈
从泛化更多实战镜头,泛化更多实在角度。增加丹的真正实用的泛化能力。
LLHC00383_0.jpg

原则
1.用224,256 低分辨率 df模式,通过训练,检测,补充,等等反复打磨,不断丰富你的SRC丰富度。
2.丹循序渐进。开始时候只有光亮的SRC的丹,→中期 增加了你最看中的 HuiA包,YuS包 炼制的 擅长 光亮+灰暗+浴室的多能丹)→后期 追求更多 樱花 10种以上 镜头。角度也是慢慢加,加到够用即可
3.  等1和2 都结束了。将来凑够了足够的SRC,随时可以换 df高分辨率模型,给4k 樱花换脸。理论上换了新的df,SRC素材够了,边训练,边用专用检测DST,没多大问题跑就完事了。(载体樱花从1080p转4k载体,载体老师会变,画质改变提升,但是都是同一个流程的 经典 灰暗bed,浴室等 镜头是不变的)





回复 支持 反对

使用道具 举报

50

主题

406

帖子

2475

积分

初级丹圣

Rank: 8Rank: 8

积分
2475

万事如意节日勋章

 楼主| 发表于 2024-6-6 14:16:57 | 显示全部楼层
come3002 发表于 2024-6-6 12:41
dfudt比较像 但是光影比较吃亏。故df 樱花换脸首先要考虑增加SRC
第一步:切脸电视剧切的抬头镜头切WF后进 ...

感谢大老,教学得这么详细,就是里面蛮多专业术语看不太明白,我是小白啊。像HuiA包,YuS包 ,还有樱花是什么啊,搞不太懂。
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-10-18 16:33 , Processed in 0.090080 second(s), 9 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表