手机换脸app是怎样做到一张src照片，快速精确的换脸的?

BigTom666 · 发表于 2022-9-12 21:30:01

星级打分

1
2
3
4
5

平均分:NAN 参与人数:0 我的评分:未评

本帖最后由 BigTom666 于 2022-9-13 11:06 编辑

手机上的换脸app越来越多，像国内的去演(已被干掉)，趣演等，国外也有好几款。

特点是，只要一张src的正面照片(非明星照片，都是网上搜不到的普通人，比如你的邻居小妹，女同事...)，上传，然后基本1-2分钟内(还含上传和下载的时间)就把合成好的一段十几秒的视频就搞定了，不得不说，有时候效果惊人的好，难以相信1张src的照片就能获得这样的效果。
开始觉得这些app应该是把dst视频源先训练的很好，然后用新的src照片快速替换，后来发现不是这么简单。
最近接触了一款叫Reface的国外app，免费版支持你自己上传的一段最长15秒视频，替换成你提供的一张src照片。(别想太多了，他们对15秒的视频有个自动审核机制，啪啪的就不行了，但打个擦边球还行

)
(Reface对国内用户很麻烦，一要翻墙，二手机必须是有谷歌市场支持的，和你的谷歌账号绑定。国内手机怎么实现，自行百度，这里就不详述了。)
这个Reface可以做到替换你提供的15秒视频和你的一张src照片，在1-2分钟内搞定(含上传和下载时间)，效果也是惊人的好。
相比之下，我自己用DeepfaceLab做这件事，在有一个很好的预训练模型前提下，我还需训练2小时才能达到类似效果(显卡2070, 8G)，这还没算提取，合成等等其它步骤的时间。最关键，只用1张src照片太难达到了。
所以很纳闷，这些手机app背后的服务器是怎么做到的，是因为用了很强大的服务器硬件吗? 还是他们的软件很牛逼，和我们的DeepfaceLab根本不是一个路数?

*********************************************************************************我是分割线*************************************************************************

感谢各位大佬回复。
我明白各位大佬的意思，这种一张src照片出来的东西，总体效果是和DFL没法比的，有其瓶颈。但是我们应该看到这种手机app所用方法的优势就是快，而且出来东西的质量不是那么的差，至少算及格，相当于有预训练模型的DFL跑了2小时的水平(算上前期和后期的其它处理过程就是将近3小时了)。一个方法可以在1-2分钟就弄出DFL需要2-3小时才能做出的效果，这个我们是否应该借鉴一下? 当然手机app方法做出来的东西也就那样了，没法继续提高。
但如果这种方法我们DFL也采用，初期仅用1-2分钟搞出一个及格的效果，然后继续往下跑。这样不是一下就省了初期的2-3小时的时间?

wtxx8888 · 发表于 2022-9-12 21:44:12

小白就别操心了，有兴趣可以看看3D成像原理，就知道一图换脸，跟DFL是没法比的。

herrfang · 发表于 2022-9-12 21:45:08

不懂帮顶，看着很厉害的样子

夢生若汐顔 · 发表于 2022-9-12 22:11:46

本帖最后由夢生若汐顔于 2022-9-12 22:19 编辑

无图无真相，只有一段文字说个勾8

我知道你说的是什么了，app的那种就垃圾的一批，评价完毕

knight0530 · 发表于 2022-9-12 23:57:57

这些手机APP有一个共同的特点，就是DST大都是固定模板，基本都是训练好的模型。

AKERSHUS · 发表于 2022-9-13 00:07:45

Reface分辨率太低，而且侧脸不能角度大。适合拿来补充表情

BigTom666 · 发表于 2022-9-13 11:01:07

感谢各位大佬回复。
我明白各位大佬的意思，这种一张src照片出来的东西，总体效果是和DFL没法比的，有其瓶颈。但是我们应该看到这种手机app所用方法的优势就是快，而且出来东西的质量不是那么的差，至少算及格，相当于DFL跑了2小时的水平(算上前期和后期的其它处理过程就是将近3小时了)。一个方法可以在1-2分钟就弄出DFL需要2-3小时才能做出的效果，这个我们是否应该借鉴一下? 当然手机app方法做出来的东西也就那样了，没法继续提高。
但如果这种方法我们DFL也采用，初期仅用1-2分钟搞出一个及格的效果，然后继续往下跑。这样不是一下就省了初期的2-3小时的时间?

LF72 · 发表于 2022-9-14 06:37:16

夢生若汐顔发表于 2022-9-12 22:11
无图无真相，只有一段文字说个勾8

我知道你说的是什么了，app的那种就垃圾的一批，评价完毕

英雄所见略同，几万的电脑目前还是比手机要好

BigTom666 · 发表于 2022-9-16 17:08:13

LF72 发表于 2022-9-14 06:37
英雄所见略同，几万的电脑目前还是比手机要好

手机只是指手机app，真正的换脸运算肯定不是由手机端计算完成，而是将dst，src都上传到手机app提供商的服务器上，合成后再下载到手机端。提供商服务器的运算能力可是秒杀家用几万元的电脑的。

LF72 · 发表于 2022-9-19 15:58:55

BigTom666 发表于 2022-9-16 17:08
手机只是指手机app，真正的换脸运算肯定不是由手机端计算完成，而是将dst，src都上传到手机app提供商的服 ...

有做出来的效果吗

		自动登录	找回密码
密码			立即注册（仅限QQ邮箱）

手机换脸app是怎样做到一张src照片，快速精确的换脸的?

真我风采勋章

万事如意节日勋章

隐世金马甲勋章

超级版主勋章

可爱萌新勋章

见习版主勋章

荣誉会员勋章

男同管理员-无尚荣耀勋章

优质版主勋章

小有贡献勋章

爱心勋章