deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 1086|回复: 7

求助,如何用自己做一套高质量SRC素材

[复制链接]

12

主题

113

帖子

1241

积分

初级丹圣

Rank: 8Rank: 8

积分
1241
 楼主| 发表于 2023-7-17 20:21:33 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
陆续尝试了几个项目,效果有好有坏,但都没达到预期效果,细究原因主要还是前期素材有限,开始的随意,导致后期训练模型和合成难度太大,现在想扎扎实实的重开一个项目。
因为前期看帖,发现SRC素材补全是个比较有难度的问题,各种方法看下来,总的感觉就是,生成不如真实的好。既然如此,就干脆拿自己的脸当SRC呗。
然后,具体要弄多少照片,现在有点疑问。按照下图米字格,一套全角度照片是7*5共35张。
115059d9upjky4kenfcu6j.jpg


**为了以后模型训练的高效率和精准度,降低合成难度**,仅一套照片感觉是不够,现在能想到的是,
1.光照方面,正面平行光1套,侧光1套,上方打光1套。
2.表情方面,皱眉1套、不开口微笑1套、开口露牙大笑1套。
3.眼神方面,前期合成时经常遇到目视方向不对的问题,上述这几套,是否需要分成眼神与脸方向相同和眼睛斜看两种进行拍摄呢。
求教各位大神,上述照片套数,哪些是有必要的,哪些是没有必要,训练模型可以生成的。
或者,还有哪些需要的注意的地方。


另外,做一套自己的SRC,以后只换DST,这算是个人专丹了吧。仔细想想还是有点意义的,跟流浪地球里面的数字生命似的,赛博骨灰盒了属于是。

回复

使用道具 举报

20

主题

172

帖子

2763

积分

初级丹圣

Rank: 8Rank: 8

积分
2763
发表于 2023-7-17 20:41:20 | 显示全部楼层
如果DFL整合了generative AI,能根据已有的人脸生成没有的角度,那就好办多了。目前补全src角度要么是手工收集素材要么是AI生成,但是AI生成目前也是刚起步。
回复 支持 0 反对 1

使用道具 举报

13

主题

994

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
11929
发表于 2023-7-18 00:21:37 | 显示全部楼层
打开mve,里面face graph就有角度分布图。不过mve边边角角的角度太刁钻了,就算你做了,dfl切图也不一定识别得出,除非你手动切图。

话说你为啥要自己拍?你要补角度,直接下论坛里有的两个图集不就行了,都是3d生成的,角度齐全。光影的话,训练的时候开颜色随机就行了。
回复 支持 反对

使用道具 举报

12

主题

113

帖子

1241

积分

初级丹圣

Rank: 8Rank: 8

积分
1241
 楼主| 发表于 2023-7-18 07:14:15 | 显示全部楼层
seancai110 发表于 2023-7-18 00:21
打开mve,里面face graph就有角度分布图。不过mve边边角角的角度太刁钻了,就算你做了,dfl切图也不一定识 ...

谢谢大佬。就是看了补全角度和光影的帖子,下面挺多反映效果一般的,才有自己拍的想法。提高素材质量,好的开始是成功的一半呢。顺便做个自己的专丹,是可以这么理解吧。
回复 支持 反对

使用道具 举报

45

主题

503

帖子

3121

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3121
发表于 2023-7-18 13:11:31 | 显示全部楼层
qdpushaver 发表于 2023-7-18 07:14
谢谢大佬。就是看了补全角度和光影的帖子,下面挺多反映效果一般的,才有自己拍的想法。提高素材质量,好 ...

要有一套完美的其实是很难的,首先你就要检查,切脸的细节,是否正确,有些看起来脸已经切出来了,但是切脸的细节上看是非常差的。所以你要一张图一张图细细的看。
回复 支持 反对

使用道具 举报

21

主题

256

帖子

3561

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3561

万事如意节日勋章

QQ
发表于 2023-7-19 01:07:47 | 显示全部楼层
ccctttccct 发表于 2023-7-18 13:11
要有一套完美的其实是很难的,首先你就要检查,切脸的细节,是否正确,有些看起来脸已经切出来了,但是切 ...

一张一张查看SRC写入的遮罩吗 DST也要查看吗
回复 支持 反对

使用道具 举报

45

主题

503

帖子

3121

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3121
发表于 2023-7-19 04:38:35 | 显示全部楼层
w7315511 发表于 2023-7-19 01:07
一张一张查看SRC写入的遮罩吗 DST也要查看吗

最好是每张都用,但是这不太现实。如果应用遮罩模型往往会不够完美,mve可以修改遮罩,但是我不会用mve
回复 支持 反对

使用道具 举报

12

主题

113

帖子

1241

积分

初级丹圣

Rank: 8Rank: 8

积分
1241
 楼主| 发表于 2023-7-19 21:31:49 | 显示全部楼层
ccctttccct 发表于 2023-7-18 13:11
要有一套完美的其实是很难的,首先你就要检查,切脸的细节,是否正确,有些看起来脸已经切出来了,但是切 ...

啊。这个。。。刚才算了下,按计划都弄完,不重复也得上千张。还带了眼镜,这下工作量大了。
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-9-23 20:27 , Processed in 0.101499 second(s), 11 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表