大佬们，面部特征点的识别能训练吗？

sad123asdaa

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:NAN  参与人数:0  我的评分:未评

就像训练遮罩一样，手动画一些大角度或者遮挡多的人脸识别点，拿去训练，这样切脸的时候准确率能不能高一些？

半年前我就觉得整个换脸过程最难的就是切脸了，当时还有热情手动切脸，现在真的切不动了

半年前那个贴

lvzhu1986

应该是不能吧  我全网搜遍了也没找到好的解法   

我现在是比较少的手动切脸了，都是自动 差不多 合成视频  有没合成的DST剪切掉 然后再剪辑顺了。

但，也总是缺少东西 手动切脸，每次都整的自己很烦躁~~

fanda

只能说异想天开，不是一台4090就能训练的，得8台V100

Mrdeepfake

主意挺不错的！也许未来可以。比如在画面变化不大的情景下，先用 MVE 手动代表性地取若干遮挡严重或近极限角度的正确脸，然后利用这些正确脸及原图训练（原图可以只选用脸附近的区域进行训练），这样训练起来会容易一些。模型训练好后，就可以精准地取这些困难脸了......

seancai110

1. 理论上可以，人脸识别的算法不止一种。但是，这个东西需要会写代码和懂ai。
不同算法的精度不一样。我之前做一个项目还花钱调用了旷视face➕➕的接口，结果有一些DFL能切出脸的图片，face➕➕居然识别不出人脸。

2. 其实切脸大概对得上就行，不用很精确。因为特征点在DFL的作用是对齐。实际训练和合成的时候，特征点并不会输入进神经网络。
不过就算这样，重新切上百张还是挺烦人的。

3. 小部分切脸错误的图，用DFL的手动重切就能切好。而大部分DFL很难切的图，是极端角度。极端角度不换脸也没关系，一般注意不到。

seancai110

fanda 发表于 2023-9-2 13:09
只能说异想天开，不是一台4090就能训练的，得8台V100

如果在原来的切脸模型上增强训练呢？
我想的是，如果直接拿切好脸的图作为输入，识别特征点。这样虽然不能完全模拟用原图切脸的过程，但是比用原图作为训练输入简单很多。

fanda

seancai110 发表于 2023-9-2 15:38
如果在原来的切脸模型上增强训练呢？
我想的是，如果直接拿切好脸的图作为输入，识别特征点。这样虽然不 ...

没有大量数据的话，根本没有效果的，都是想对大角度的特征点识别而已。。。

seancai110

fanda 发表于 2023-9-2 15:55
没有大量数据的话，根本没有效果的，都是想对大角度的特征点识别而已。。。 ...

积少成多呗，可以把平时自己手动切的攒起来，用来训练。或者像镇坛之宝一样，收集大家的大角度图片。