deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 4800|回复: 73

《科学修仙实验室》——第二期,死亡角度的解决办法猜想

  [复制链接]

16

主题

132

帖子

2740

积分

初级丹圣

Rank: 8Rank: 8

积分
2740
发表于 2021-3-3 20:43:17 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
第一期分享了src的素材收集和整理思路;本来第二期想分享一下训练的三个阶段以及三个阶段中遇到的问题【简称为三次渡劫】;但是今天在写程序的时候偶然间想到了几个解决死亡角度的缺失的解决办法【当时写算法时遇到的问题和死亡角度很像】。下面详细说说几个途径:
1、利用成型的训练仙丹解决;
依靠之前训练过死亡角度的丹来训练新src与dst,模型中会遗留一些死亡角度的数据,使得训练新src时会将此数据应用到这里面,楼主也在现实中实验了这个方法;效果是可以的,但是会出现训练初期时死亡角度的训练预览中会出现一个很明显的现象,就是死亡角度的预览会有一种动画和数字处理的感觉【光影、细节等不真实】,之后再训练很长时间后,这类现象会减弱直至消失,最后得到真实的脸。
2、利用facebuilder
这个方法我也测试过,之前也分享过,现象是一样的,只不过时间会快一些,约为第一个方法的五分之一;
3、利用反练的方式;
这个方法的实现原理之前也讲过,这里不做讲解;这是这个方法有一个隐患,就是长时间反练之后,会影响整体输出的效果,会带有一些dst的特征;
【4、猜想中的方法】——通过dst、src整合训练;
这个方法的思路结合反练及facebuilder的想法。
《1》反练是提取dst死亡角度脸型数据;
《2》facebuilder是补齐死亡角度数据,并且根据大数原理补齐细节、削减动画感;
那么结合出来是不是也有效呢?
把dst的死亡角度提取排重出来,放入到src中【补齐src死亡角度缺失】,再依靠src的数量补齐细节数据【facebuilder中的大数原理】,那么这样训练是不是可以节省建模和数据缺失所浪费的时间呢?
这个方法我将在仅一个星期内实验一下;
实验的目的:
1、确定此方法是否有效;
2、确定此方法中src与dst死亡角度的配比;
3、确定此方法相较于前三种方法的时间差及效果;
好了,第二期结束,免费……



回复

使用道具 举报

0

主题

174

帖子

911

积分

高级丹师

Rank: 5Rank: 5

积分
911
发表于 2021-3-12 13:17:12 | 显示全部楼层
好的感谢受教
回复 支持 0 反对 1

使用道具 举报

16

主题

132

帖子

2740

积分

初级丹圣

Rank: 8Rank: 8

积分
2740
 楼主| 发表于 2021-3-3 20:56:14 | 显示全部楼层
这里啰嗦一句:可能有些人会问猜想的这个方法和反练类似,有什么不同吗
这里回答一下,dst反练,模型所获取的是不仅仅是dst的死亡角度,还包含很多的正常角度dst数据,所以才会影响最后输出的感官;
而猜想方法是将dst少量的死亡角度提取放入到src,利用模型的大数原理补足细节,可能会降低影响。
回复 支持 1 反对 0

使用道具 举报

13

主题

194

帖子

3204

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3204
发表于 2021-3-3 22:19:20 | 显示全部楼层
感谢,非常有用,辛苦了
回复 支持 反对

使用道具 举报

79

主题

1529

帖子

7853

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
7853

万事如意节日勋章

发表于 2021-3-3 23:02:13 | 显示全部楼层
helas 发表于 2021-3-3 20:56
这里啰嗦一句:可能有些人会问猜想的这个方法和反练类似,有什么不同吗
这里回答一下,dst反练,模型所获取 ...

也可以不用dst而用相似的做实验
回复 支持 反对

使用道具 举报

79

主题

1529

帖子

7853

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
7853

万事如意节日勋章

发表于 2021-3-3 23:07:49 | 显示全部楼层
helas 发表于 2021-3-3 20:56
这里啰嗦一句:可能有些人会问猜想的这个方法和反练类似,有什么不同吗
这里回答一下,dst反练,模型所获取 ...

关注楼主实验结果
回复 支持 反对

使用道具 举报

2

主题

453

帖子

9924

积分

超级版主

Rank: 64Rank: 64Rank: 64Rank: 64Rank: 64Rank: 64Rank: 64Rank: 64Rank: 64Rank: 64Rank: 64Rank: 64Rank: 64Rank: 64Rank: 64Rank: 64

积分
9924

超级版主勋章荣誉会员勋章优质版主勋章小有贡献勋章

QQ
发表于 2021-3-3 23:19:55 | 显示全部楼层
关注了,谢谢分享思路
杀生为护身,斩业非斩人
回复 支持 反对

使用道具 举报

10

主题

2832

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
17188

万事如意节日勋章

发表于 2021-3-3 23:28:34 | 显示全部楼层
感谢,有用,

不过对 真正 练好的丹来说 ,不存在死亡角度,即便素材缺失
回复 支持 反对

使用道具 举报

36

主题

498

帖子

8万

积分

超级版主

骗子和无效违规帖子请在帖子右下角举报处理(奖灵石)

Rank: 64Rank: 64Rank: 64Rank: 64Rank: 64Rank: 64Rank: 64Rank: 64Rank: 64Rank: 64Rank: 64Rank: 64Rank: 64Rank: 64Rank: 64Rank: 64

积分
82248

隐世金马甲勋章超级版主勋章可爱萌新勋章见习版主勋章荣誉会员勋章男同管理员-无尚荣耀勋章优质版主勋章小有贡献勋章爱心勋章

发表于 2021-3-3 23:48:00 | 显示全部楼层
准确的来说应该不是死亡角度,而是素材的缺失角度的补齐

也希望你的实验可以成功,这样可以避免一些人物的素材不齐全,导致DST和SRC融合不完整的情况

前提是做法得大众简单,反反复复浪费时间的话,可不如去找缺失角度素材的补齐,而且也要考虑是否出BUG和兼容性
★★★鴉啼舉杯醉望月,微醺朦胧夢萧萧★★★
【老鸟进阶】练就超清Src素材的必要事项
无效链接、骗子和失效帖子请在帖子右下角举报处理
公益请自行查阅我公益示范帖
回复 支持 反对

使用道具 举报

16

主题

132

帖子

2740

积分

初级丹圣

Rank: 8Rank: 8

积分
2740
 楼主| 发表于 2021-3-4 10:17:30 | 显示全部楼层
本帖最后由 helas 于 2021-3-4 10:41 编辑
poiu88 发表于 2021-3-3 23:28
感谢,有用,

不过对 真正 练好的丹来说 ,不存在死亡角度,即便素材缺失

成品丹其实我也有,但是补角度的速度确实太过漫长,在素材缺少死亡角度的情况下,正侧脸3000左右出效果【bs10】,死亡角度却需要10W+左右…… 实在是太慢了
回复 支持 反对

使用道具 举报

14

主题

119

帖子

2071

积分

初级丹圣

Rank: 8Rank: 8

积分
2071
发表于 2021-3-4 12:59:37 | 显示全部楼层
此乃鬼才是也
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-10-6 12:20 , Processed in 0.098402 second(s), 10 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表