人脸标记点疑问

血腥玛丽

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:NAN  参与人数:0  我的评分:未评

疑问1：疑问图中红框的五官标记，眼睛标记没对上，整体有点向上，但偏差不大， 眉毛，鼻子，人脸轮廓，点与点之间没有DFL原版切脸这么规整，显得歪歪斜斜的，但都对上五官的正确位置，这样的切脸是否有影响？

疑问正脸

疑问2：疑问图侧脸，鼻子的位置有的向外偏了，有的向内了，这样是否勉强合格？我看论坛有人说位置大概可以就行了，不知道这个说法对不对？

疑问侧脸

疑问侧脸2

           
疑问3：眼睛的标记某些点打结了，但是可以对齐人脸的眼睛位置，这样是否可以忽略眼睛点打结的问题？（可以忽略图中眼睛没对上位置的问题）


正常图：

DFL切正脸

DFL切侧脸

望前辈们指点下，谢谢！

seancai110

其实不要紧的。
因为特征点的作用只是在切图和合成的时候，进行缩放变换的换算。实际上，特征点的信息，在训练和合成的时候，是不会输入进神经网络的。
还有一个是在开了口眼优化的时候，用眼睛和嘴巴的特征点生成一个遮罩加到loss计算里。
所以只要不是人脸太歪，都可以用。不用追求完美对齐。反正都是dfl自动切的图，要歪src和dst一起歪

血腥玛丽

seancai110 发表于 2024-3-31 16:14
其实不要紧的。
因为特征点的作用只是在切图和合成的时候，进行缩放变换的换算。实际上，特征点的信息，在 ...

其实我的疑问就在于，DFL是否跟人的眼睛一样，可以看到图片里是一张人脸，但DFL需要标记点来识别五官具体位置所在，而标记点存在一个识别的范围，譬如每个五官存在一个长方形的范围，每个五官位置长方形的范围大小不一，五官就在长方形中心，像我上面图用红框框住的范围，只要landmark不超出这个范围就没事，不过这都是我的胡乱猜测。

pasanonic

合成开羽化、侵蚀就是为了弥补这样的错误.但也不是绝对,有的脸型对不上就是因为这个原因
虽然可以手动调节,但是任务量太大,非专业领域不用管

血腥玛丽

pasanonic 发表于 2024-3-31 16:44
合成开羽化、侵蚀就是为了弥补这样的错误.但也不是绝对,有的脸型对不上就是因为这个原因
虽然可以手动调节 ...

dst我只调整香蕉和牛奶，其余大概位置就行。
src基本都会调，全部过一遍MVE查，不过不是偏的太厉害都会忽略掉。

pasanonic

血腥玛丽 发表于 2024-3-31 20:05
dst我只调整香蕉和牛奶，其余大概位置就行。
src基本都会调，全部过一遍MVE查，不过不是偏的太厉害都会忽 ...

dst 嘴部你要调节,有时候侧脸微微低头吃香蕉挡住了,你不标识出来张嘴点位,练模型的时候会只练出小嘴唇

seancai110

血腥玛丽 发表于 2024-3-31 16:32
其实我的疑问就在于，DFL是否跟人的眼睛一样，可以看到图片里是一张人脸，但DFL需要标记点来识别五官具体 ...

不需要。特征点信息根本就没有输入进神经网络里。

yu6172571

我也一直在纠结这个问题，而且还有一些手动选脸的时候也识别不上，这种不知道怎么解决！