单图换脸的技术瓶颈

haibao637

duanmuzr 发表于 2022-11-30 17:36
滚石不是发过单图换脸吗？——《幻脸》

效果可能是不能说像本人的，但是技术尝试还是很牛叉的。

滚石的单图换脸不是很像，和腾讯的比感觉还有些差距。单脸建模会损失人物信息，又会导致不像。。

haibao637

pop1868 发表于 2022-11-30 17:02
现在手机上很多APP都是用一张照片换脸的，做出来的效果还不错，而且速度还挺快的！不知道是用的什么技术！ ...

我了解的情况，大部分都是用人脸识别器提取id特征。比如 faceshifter/simswap/Hififace

haibao637

所以，我想的是，有没有办法将dfl和单图换脸结合起来，让单图换脸也能换大角度/大表情。

duanmuzr

haibao637 发表于 2022-11-30 21:58
所以，我想的是，有没有办法将dfl和单图换脸结合起来，让单图换脸也能换大角度/大表情。 ...

滚石用的就是这个方法，结果就是不太像

913211409

haibao637 发表于 2022-11-30 21:50
普通人也不会搞换脸吧，主要从提供服务的角度出发，单图如果能达到dfl的效果，商业价值会不会更大。 ...

腾讯那个一般融合的很自然，肉眼很难发觉，我说的普通人是咱们这种娱乐的人，他们的商品肯定是用在科技领域，或者是出售给开发者的，一般人用来娱乐使用付出太大，而且你买他的代码做自由视频换脸app在市场上都过不了审的

yinjiaoyuan@163

913211409 发表于 2022-12-2 17:17
腾讯那个一般融合的很自然，肉眼很难发觉，我说的普通人是咱们这种娱乐的人，他们的商品肯定是用在科技领 ...

你说到的腾讯融合功能是指https://cloud.tencent.com/product/facefusion这个吗？

kitto

app上面视频是固定的，可能提前抠好mask这些，跟单图那些算法不太一样吧，有人啥思路可以讲下吗？

kitto

是不是理论上可以收集很多视频来训练多个模型，然后给一张图片，在训练的数据里面找一个相似度最高的作为结果

lyl_le

单人换脸对于dst选材要求高，一般人难弄，人工筛选工作量大，智能筛选家用显卡又支撑不起