部分landmark错乱的切脸可以用于专用模型训练吗？

WaveBedo

星级打分

• 1
• 2
• 3
• 4
• 5

平均分:NAN  参与人数:0  我的评分:未评

各位坛友，部分landmark错乱的切脸可以用于专用模型训练吗？
有遮挡的切脸太多了，如果都删掉，会缺少很多特别的表情。
特别是吃东西的表情，如果不是在吃东西，根本不会有这个表情。
画好遮罩的情况下，这些切脸是不是可以使用啊


假如把landmark想像成一个三角形，如果它只是一个角缺失了一部分，
就像第一张跟第四张，应该还是可以对齐的吧

lknet

这种可以用,不是完全错乱就行
当然也可以用mve手动调整一下,其实没多大必要.
也可以切脸时候手动提脸,按下a键,拖动鼠标,可以有限调整点位.

come3002

论坛下载的 数据集 会有一定量的模糊/信息位点错误的图片。手动删除工作量很大。
看你要求，要求不高，就是720p 1080,p 樱花换脸，欧美换脸随便换脸玩玩。没必要处理。
如果将来换脸4k 欧美4k樱花，想要做高质量 虚影少，抖动少的精品，宁缺毋滥最好删除。

WaveBedo

lknet 发表于 2023-11-5 11:00
这种可以用,不是完全错乱就行
当然也可以用mve手动调整一下,其实没多大必要.
也可以切脸时候手动提脸,按下a ...

遮挡的素材有点多，又比较独特。删掉的话。可能就没办法训练到这种表情了，所以想，是不是可以利用起来。只要遮罩外的不参与训练，应该是可以对齐的吧

WaveBedo

come3002 发表于 2023-11-5 11:01
论坛下载的 数据集 会有一定量的模糊/信息位点错误的图片。手动删除工作量很大。
看你要求，要求不高，就是 ...

抖动的问题，应该是没对齐造成的吧。假如把landmark想像成一个三角形，如果它只是一个角缺失了一部分，就像第一张跟第四张，应该还是可以对齐的吧

s659982344

要不还是忍痛删除吧 可以等一波素材

come3002

WaveBedo 发表于 2023-11-5 13:19
抖动的问题，应该是没对齐造成的吧。假如把landmark想像成一个三角形，如果它只是一个角缺失了一部分，就 ...

高质量，精选素材喂养 感觉数据集删除一部分可惜（比如原来7w删除部分后3w精选，光影肯定有损失）。
可以换个思维，可以用 精选过的数据集先训练底单。
后期转专丹时候，dst用 3w精选数据集 4k欧美或4k樱花替换方法;(数据集本身不是万能的。比如数据集一般闭眼少，可以用4k樱花闭眼，4k欧美闭眼弥补不足)。

你可以参考坛主的截图。他最后阶段就用了樱花闭眼素材

一部2小时 樱花4k或欧美就可以切很多有用的光影/闭眼等表情

WaveBedo

s659982344 发表于 2023-11-5 13:23
要不还是忍痛删除吧 可以等一波素材

好的

WaveBedo

come3002 发表于 2023-11-5 13:48
高质量，精选素材喂养 感觉数据集删除一部分可惜（比如原来7w删除部分后3w精选，光影肯定有损失）。
可以 ...

感谢提醒

come3002

WaveBedo 发表于 2023-11-5 14:29
感谢提醒

抖动情况比较复杂。以DST信息位点错误为主，但是也有其他抖动情况。尤其是有刘海的比较明显。


我用坛友一个贴子的 樱花图片 截图测试过，信息位点正确。




开相同的 W，E，T。3个丹。
有2张 刘海黑边太严重，且无挽救的机会。这样的刘海旁边无规则黑边白斑等产生的错误换脸，会诱发抖动。

后来又做了其他测试。也发现了刘海旁边无规则黑边白斑等产生的错误换脸，诱发抖动问题。


https://dfldata.cc/forum.php?mod=viewthread&tid=15528&extra=&highlight=%E6%A8%A1%E7%B3%8A&page=2