deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 3605|回复: 21

deep-live-cam实时换脸中文整合包,对比评测deepfacelive

[复制链接]

216

主题

1998

帖子

68万

积分

管理员

Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96

积分
687502

隐世金马甲勋章超级版主勋章可爱萌新勋章见习版主勋章荣誉会员勋章男同管理员-无尚荣耀勋章优质版主勋章小有贡献勋章

 楼主| 发表于 2024-8-18 21:20:16 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
最近这个deep-live-cam项目(下文简称dlc)也是火了一把,只需要1张图就能实时换脸,都不需要训练自己的模型,直接开箱可以用。文末直接放本地运行的整合包下载链接
那作为deepfacelive的论坛,就来亲自评测下两款软件
instruction.png
易用度
deep-live-cam:★★★★☆
deepfacelive:★☆☆☆☆
这方面毫无疑问是dlc胜出,dlc无需训练,只需要一张照片就能直接进行换脸。而deepfacelive(以下简称DFL)由于算法不同,需要针对每个要换脸的形象单独训练一个模型,然后才能使用,无异步骤要麻烦很多。训练时间几天到几周不等,想快速图个新鲜好玩的用户肯定不适合DFL
dlc算法虽然方便了使用,但目前用户界面以及操作流程其实还比较原始,各种bug还比较多,所以只能给4星

功能丰富度
deep-live-cam:★☆☆☆☆
deepfacelive:★★★★☆
dlc简单的同时,也丧失了很多操控性,比如输入来源、颜色控制、边缘融合处理、人脸大小控制、多人脸筛选控制等,基本都没有这些实际商用会遇到的功能需求。甚至不如使用同一个算法的rope项目,rope项目的功能也比dlc要更丰富
dfl就比较成熟,这类功能就比较多。
清晰度
deep-live-cam:★☆☆☆☆-★★★☆☆
deepfacelive:★★★☆☆-★★★★★
dlc的清晰度是它一大弱点,因为其基础模型只有128*128的人脸分辨率,比微信视频的画质还要差,具体看我发的视频即可感受到。肉眼可见的像素格子。 软件内虽然自带了GFPGAN来做人脸清晰化处理,但加了超分算法后一来处理速度下降,二来超分后的人脸会有一种失真感,尤其在牙齿等区域会显得非常不稳定,一会儿2门牙一会儿3门牙,不停的变化
dfl的清晰度理论上可以做到很高,流浪地球里的吴京刘德华年轻化就是dfl(deepfacelab)配合后期实现的。不过理论归理论,实践中考虑模型训练时间和成本,一般使用256*256分辨率的人脸模型,远看可以做到毫无破绽,近距离特写还是会露馅。此外模型的训练方法和技巧也会直接影响到模型训练效果
逼真度
deep-live-cam:★★★★☆
deepfacelive:★★★★☆
这方面两者可以打平手,前提是dfl模型训练的比较到位。
两者都能较好还原目标人物的特征,但也都不能改变脸型,所以脸型差异过大时,逼真度也会明显下降

抗遮挡
deep-live-cam:★☆☆☆☆
deepfacelive:★★★★☆
dlc可以说完全没做这方面的优化,稍微挡住一点画面就露馅。我在视频里也有演示
dfl这方面优化做的比较好,在训练模型时,可以结合Xseg遮挡算法进行遮挡区域的学习,使得实际推理时,能自行预测出被遮挡的部分进行蒙版处理

光影适配度
deep-live-cam:★★★★★
deepfacelive:★★★☆☆-★★★★★
这个是dlc的另一个大优势,下方gif图有展示,在环境光源进行变化时,模型可以做到跟随光影变化而变化。
dfl也能做到这个效果,但对模型训练要求就高了很多,需要拿目标人物大量不同光影角度的素材进行训练才行。如果训练素材里的光影丰富度不足,就会产生类似面具感的瑕疵,面部的光影和环境会有色差
demo 1 1.gif

windows环境整合包下载地址
直接解压,双击启动.exe即可使用
硬件要求:有英伟达显卡,且要支持CUDA

硬件不符合要求也不用急,软件也有对应mac版本和windows非N卡版本,我还没做成整合包,有需求先点赞评论吧,人数多的话我再考虑制作下其他硬件下的整合包

评分

参与人数 4贡献 +4 收起 理由
Terea + 1 太棒辣!
opdp + 1 十分给力!
ktis321 + 1 十分给力!
yinshan2024 + 1 十分给力!

查看全部评分

提供数字人直播服务、文字/音频驱动数字人服务,有意者联系我QQ563861181
全站默认解压密码dfldata.xyz
DFL交流QQ群五群974612885
AI绘画交流QQ群710238550
我的B站账号:特看科技的滚石   其他自称彦祖的不是我,请勿上当
回复

使用道具 举报

4

主题

130

帖子

1795

积分

初级丹圣

Rank: 8Rank: 8

积分
1795
发表于 2024-8-18 21:51:06 | 显示全部楼层
伽利略 发表于 2024-8-18 21:24
听说deeplivecam就是以前roop改了一下,不知真假

yes its just a rename and new repo for roop cam he made march 2023 just with a new name to make it sound like deepfacelive
回复 支持 1 反对 0

使用道具 举报

1

主题

27

帖子

400

积分

初级丹师

Rank: 3Rank: 3

积分
400

万事如意节日勋章

发表于 2024-8-18 21:24:06 | 显示全部楼层
听说deeplivecam就是以前roop改了一下,不知真假
回复 支持 反对

使用道具 举报

216

主题

1998

帖子

68万

积分

管理员

Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96

积分
687502

隐世金马甲勋章超级版主勋章可爱萌新勋章见习版主勋章荣誉会员勋章男同管理员-无尚荣耀勋章优质版主勋章小有贡献勋章

 楼主| 发表于 2024-8-18 21:28:02 | 显示全部楼层
伽利略 发表于 2024-8-18 21:24
听说deeplivecam就是以前roop改了一下,不知真假

没错
提供数字人直播服务、文字/音频驱动数字人服务,有意者联系我QQ563861181
全站默认解压密码dfldata.xyz
DFL交流QQ群五群974612885
AI绘画交流QQ群710238550
我的B站账号:特看科技的滚石   其他自称彦祖的不是我,请勿上当
回复 支持 反对

使用道具 举报

5

主题

128

帖子

1173

积分

初级丹圣

Rank: 8Rank: 8

积分
1173

万事如意节日勋章

发表于 2024-8-18 22:13:15 | 显示全部楼层
deep-live-cam虽然很火,但是和deepfacelive差很多,和rope  facefusion也不是一个档次
回复 支持 反对

使用道具 举报

0

主题

43

帖子

1310

积分

初级丹圣

Rank: 8Rank: 8

积分
1310
发表于 2024-8-19 00:10:14 | 显示全部楼层
感謝
回复

使用道具 举报

33

主题

314

帖子

2316

积分

初级丹圣

Rank: 8Rank: 8

积分
2316
发表于 2024-8-19 02:22:42 | 显示全部楼层
无脑支持坛主发高级贴
回复 支持 反对

使用道具 举报

0

主题

15

帖子

200

积分

初级丹师

Rank: 3Rank: 3

积分
200
发表于 2024-8-19 05:57:23 | 显示全部楼层
那刚好这个可以补充光影效果了吧,用一张SRC套上,多做点光影效果,回来用dfl训练。完美
回复 支持 反对

使用道具 举报

0

主题

15

帖子

1384

积分

初级丹圣

Rank: 8Rank: 8

积分
1384

开心娱乐节日勋章

发表于 2024-8-19 08:38:29 | 显示全部楼层
滚石大大V5,,roop技术发展好快
回复 支持 反对

使用道具 举报

12

主题

284

帖子

7970

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
7970

万事如意节日勋章

发表于 2024-8-19 09:35:13 | 显示全部楼层
之前roop源码改ui.py就可以玩live,这个人就是基于原来那个优化了视频流吧,不然原版roop改完4090都是ppt
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-11-21 23:45 , Processed in 0.154641 second(s), 47 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表