deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 324|回复: 7

人脸标记点疑问

[复制链接]

10

主题

43

帖子

387

积分

初级丹师

Rank: 3Rank: 3

积分
387
 楼主| 发表于 2024-3-31 15:55:15 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评


疑问1:疑问图中红框的五官标记,眼睛标记没对上,整体有点向上,但偏差不大, 眉毛,鼻子,人脸轮廓,点与点之间没有DFL原版切脸这么规整,显得歪歪斜斜的,但都对上五官的正确位置,这样的切脸是否有影响?

疑问正脸

疑问正脸



疑问2:疑问图侧脸,鼻子的位置有的向外偏了,有的向内了,这样是否勉强合格?我看论坛有人说位置大概可以就行了,不知道这个说法对不对?


疑问侧脸

疑问侧脸

疑问侧脸2

疑问侧脸2

           
疑问3:眼睛的标记某些点打结了,但是可以对齐人脸的眼睛位置,这样是否可以忽略眼睛点打结的问题?(可以忽略图中眼睛没对上位置的问题)


正常图:

DFL切正脸

DFL切正脸

DFL切侧脸

DFL切侧脸


望前辈们指点下,谢谢!




回复

使用道具 举报

12

主题

821

帖子

8991

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
8991
发表于 2024-3-31 16:14:25 | 显示全部楼层
其实不要紧的。
因为特征点的作用只是在切图和合成的时候,进行缩放变换的换算。实际上,特征点的信息,在训练和合成的时候,是不会输入进神经网络的。
还有一个是在开了口眼优化的时候,用眼睛和嘴巴的特征点生成一个遮罩加到loss计算里。
所以只要不是人脸太歪,都可以用。不用追求完美对齐。反正都是dfl自动切的图,要歪src和dst一起歪
回复 支持 1 反对 1

使用道具 举报

10

主题

43

帖子

387

积分

初级丹师

Rank: 3Rank: 3

积分
387
 楼主| 发表于 2024-3-31 16:32:31 | 显示全部楼层
本帖最后由 血腥玛丽 于 2024-3-31 16:40 编辑
seancai110 发表于 2024-3-31 16:14
其实不要紧的。
因为特征点的作用只是在切图和合成的时候,进行缩放变换的换算。实际上,特征点的信息,在 ...

其实我的疑问就在于,DFL是否跟人的眼睛一样,可以看到图片里是一张人脸,但DFL需要标记点来识别五官具体位置所在,而标记点存在一个识别的范围,譬如每个五官存在一个长方形的范围,每个五官位置长方形的范围大小不一,五官就在长方形中心,像我上面图用红框框住的范围,只要landmark不超出这个范围就没事,不过这都是我的胡乱猜测。
回复 支持 反对

使用道具 举报

29

主题

398

帖子

2419

积分

初级丹圣

Rank: 8Rank: 8

积分
2419

万事如意节日勋章

发表于 2024-3-31 16:44:35 | 显示全部楼层
合成开羽化、侵蚀就是为了弥补这样的错误.但也不是绝对,有的脸型对不上就是因为这个原因
虽然可以手动调节,但是任务量太大,非专业领域不用管
回复 支持 反对

使用道具 举报

10

主题

43

帖子

387

积分

初级丹师

Rank: 3Rank: 3

积分
387
 楼主| 发表于 2024-3-31 20:05:31 | 显示全部楼层
本帖最后由 血腥玛丽 于 2024-3-31 20:07 编辑
pasanonic 发表于 2024-3-31 16:44
合成开羽化、侵蚀就是为了弥补这样的错误.但也不是绝对,有的脸型对不上就是因为这个原因
虽然可以手动调节 ...

dst我只调整香蕉和牛奶,其余大概位置就行。
src基本都会调,全部过一遍MVE查,不过不是偏的太厉害都会忽略掉。
回复 支持 反对

使用道具 举报

29

主题

398

帖子

2419

积分

初级丹圣

Rank: 8Rank: 8

积分
2419

万事如意节日勋章

发表于 2024-3-31 21:30:02 | 显示全部楼层
本帖最后由 pasanonic 于 2024-3-31 21:35 编辑
血腥玛丽 发表于 2024-3-31 20:05
dst我只调整香蕉和牛奶,其余大概位置就行。
src基本都会调,全部过一遍MVE查,不过不是偏的太厉害都会忽 ...

dst 嘴部你要调节,有时候侧脸微微低头吃香蕉挡住了,你不标识出来张嘴点位,练模型的时候会只练出小嘴唇

回复 支持 反对

使用道具 举报

12

主题

821

帖子

8991

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
8991
发表于 2024-3-31 23:34:55 | 显示全部楼层
血腥玛丽 发表于 2024-3-31 16:32
其实我的疑问就在于,DFL是否跟人的眼睛一样,可以看到图片里是一张人脸,但DFL需要标记点来识别五官具体 ...

不需要。特征点信息根本就没有输入进神经网络里。
回复 支持 反对

使用道具 举报

0

主题

6

帖子

53

积分

高级丹童

Rank: 2

积分
53

万事如意节日勋章

发表于 2024-4-2 07:46:22 | 显示全部楼层
我也一直在纠结这个问题,而且还有一些手动选脸的时候也识别不上,这种不知道怎么解决!
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-4-17 11:30 , Processed in 0.084170 second(s), 11 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表