deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 2255|回复: 15

WF换头方法的最终目标说明

[复制链接]

11

主题

2624

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
14162

真我风采勋章万事如意节日勋章

 楼主| 发表于 2022-6-16 16:01:46 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
鉴于很多尝试我WF换头方式的小伙伴们,用于合成有很多的疑问,专发一贴用于解释此法的研究方向与目的。
我个人是自娱自乐玩非正经素材的,过程中有大量不可再生素材的SRC,需要一个极限的补全SRC素材方案(几张图的SRC最终就可换脸)。
这就是我萌发潜心研究WF换头的起因近日已经达成用几十张图,就补全了角度跟表情
可以说此法对于我个人来说,已经功成圆满并达到了预期。

再说下经验方面,WF换头运算时会有两大阶段(根据清晰变化先后)。
第一阶段运算为脸部跟部分背景,当脸部运算到达极致时(换脸到这里就可结束了,所以此法极度费时间)会自动进入第二阶段。
第二阶段会全力处理头发相关的图像(这阶段对于补素材很重要,虽然范围还是DST的,但发型发色刘海卷发直发等,都是SRC状态),背景也会更加的清晰。
说合成时背景会有光圈的,都是运算迭代不到位,没有进入第二阶段。
模型架构选择为DF类(保证SRC相似度),参数方面遮罩一直关闭,扭曲一直开启(能进第二阶段意味着GAN都不用开,就可以用脸罩合成换脸)。

运算完毕合成输出为直方图,切脸后补充进SRC里。(补角度模型的帖子都有讲,此处不再赘述)
我个人最初就没考虑把此法用于合成作品,综合上述,这就是为了,补全稀有SRC素材而生的方法
用于合成的话问题会很多本人还在继续研究中,如果有新的经验会继续分享,也欢迎大家尝试跟介绍自己的经验

回复

使用道具 举报

8

主题

400

帖子

3483

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3483
发表于 2022-6-16 16:34:42 | 显示全部楼层
到这我才明白你这个方法是只用于补素材角度。这样看来你上一个贴似乎有点没说清楚,感觉是说能合成,而且还能用于补角度的意思。那这样的话,跟我用正常的训练方法去补角度相比,有什么优势?
回复 支持 反对

使用道具 举报

11

主题

2624

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
14162

真我风采勋章万事如意节日勋章

 楼主| 发表于 2022-6-16 16:41:00 | 显示全部楼层
本帖最后由 wtxx8888 于 2022-6-16 16:54 编辑
dsyrock 发表于 2022-6-16 16:34
到这我才明白你这个方法是只用于补素材角度。这样看来你上一个贴似乎有点没说清楚,感觉是说能合成,而且还 ...

看金鱼那套素材的贴里不是说了?最少500张往上才能补
我刚成功20来张就三四个角度的SRC补全,而且而且而且我是真人补的,比3D的好多了
主要用于不可再生素材补全,非正经手段拍来的视频合成也不是不能用,需要在遮罩上下功夫,没有现成的罩用。
回复 支持 反对

使用道具 举报

5

主题

348

帖子

4253

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4253
发表于 2022-6-16 20:23:29 | 显示全部楼层
用你这方法补齐一套角度需要多久?有些角度还是很难练的
回复 支持 反对

使用道具 举报

0

主题

55

帖子

3883

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3883
发表于 2022-6-16 22:41:47 | 显示全部楼层
恩...,仔細看了三遍,不太能理解~,遇到的情況不夠多,慢慢磨ㄅ~~
回复 支持 反对

使用道具 举报

22

主题

615

帖子

4609

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4609
发表于 2022-6-16 23:14:59 | 显示全部楼层
你直接标题说wf补角度不就好了,说啥换头兜了这么隔圈
回复 支持 反对

使用道具 举报

11

主题

2624

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
14162

真我风采勋章万事如意节日勋章

 楼主| 发表于 2022-6-17 00:36:03 | 显示全部楼层
daiandy 发表于 2022-6-16 20:23
用你这方法补齐一套角度需要多久?有些角度还是很难练的

要很久,毕竟我就是用几十张补,估计最少50万迭代起步,补一套稀缺的最少得挂好几天
回复 支持 反对

使用道具 举报

20

主题

497

帖子

4947

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4947

万事如意节日勋章

发表于 2022-6-17 19:51:12 | 显示全部楼层
有没有演示图呢
回复 支持 反对

使用道具 举报

11

主题

2624

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
14162

真我风采勋章万事如意节日勋章

 楼主| 发表于 2022-6-17 21:22:51 | 显示全部楼层
丸丸 发表于 2022-6-17 19:51
有没有演示图呢

刚开炉炼自身电脑极限的丹,顺利估计也得下个月才能出货,前面的丹都是实验性的,不过是验证想法用的。
回复 支持 反对

使用道具 举报

26

主题

207

帖子

1365

积分

初级丹圣

Rank: 8Rank: 8

积分
1365
发表于 2022-6-19 13:56:56 | 显示全部楼层
好像有点明白了,这个值得一试
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-9-22 04:32 , Processed in 0.088323 second(s), 9 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表