deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 1684|回复: 10

轻松愉快,别为难自己,POV才是归途

[复制链接]

6

主题

60

帖子

1966

积分

初级丹圣

Rank: 8Rank: 8

积分
1966
 楼主| 发表于 2024-1-8 19:59:40 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
本帖最后由 lucky1 于 2024-1-9 11:25 编辑

心得都在标题里了,像我这种不喜欢死亡角度,大仰角的,也不喜欢专门去看牙齿什么的我是看剧情内容的,
Facefusion 是首选,不费力,省事。
Facefusion 是原roop停止更新后最强大的分支,近两个月也是狂奔了数个版本,而且能通过命令行完成一切功能,kaggle服务端能封闭式提交保存一次完成, colab可命令行也可图像界面操作,
这是其他分支不具备的功能。最新版本2.1.3

但是最新版本有许多新特性,即使在图形界面也需要有些基础知识了,比以前门槛提高了

pov,海量视频,比如lifeselect*****, 不敢打全,Facefusion现在有codeformer,gfpgan等多种面部增强,我最喜欢用codeformer,说清晰度问题只能说你对Facefusion了解还不够,
4k都能胜任,只是耗时间。如果你算力充沛,甚至能先提升原视频清晰度,Facefusion内置帧增强功能,{real_esrgan_x2plus,real_esrgan_x4plus,real_esrnet_x4plus }
是不是有点熟悉,real_esrnet_x4plus!!!直接爆显卡!!!


来几张素图,希望没有违反版规,我一般都是脚本批量换,这两个视频截图,圆脸,锥子脸,Facefusion都很好处理了,当然这里不讨论像不像某某人,见仁见智啊
自己开心就好

图已被版主删了,遗憾



看看感兴趣的人有多少,我在kaggle上运行Facefusion的经验自问还是很独到的,此外Colab近期封禁facefusion官方colab脚本,原脚本仍然无效,我自行解决了而且稳定运行,
后续我们可以一起探讨分享






回复

使用道具 举报

14

主题

2944

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
15961

真我风采勋章万事如意节日勋章

发表于 2024-1-9 03:04:47 | 显示全部楼层
lucky1 发表于 2024-1-8 20:18
rope有一个crystal分支,恕我直言,整体上Facefusion胜过,关键是在服务端无人值守情况下运行的能力,其他 ...

DFL停更这么久,效果照样吊打其他同类软件。就是门槛高,不适合基础差的人
回复 支持 1 反对 0

使用道具 举报

6

主题

60

帖子

1966

积分

初级丹圣

Rank: 8Rank: 8

积分
1966
 楼主| 发表于 2024-1-8 20:06:10 | 显示全部楼层
附带提醒,如果要跑云端,梯子不行好心劝退,因为动辄要上传上G的视频,付费梯子也未必能如意
回复 支持 反对

使用道具 举报

80

主题

1541

帖子

8019

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
8019

万事如意节日勋章

发表于 2024-1-8 20:06:24 | 显示全部楼层
和rope比呢?
回复 支持 反对

使用道具 举报

6

主题

60

帖子

1966

积分

初级丹圣

Rank: 8Rank: 8

积分
1966
 楼主| 发表于 2024-1-8 20:18:19 | 显示全部楼层
本帖最后由 lucky1 于 2024-1-8 20:20 编辑

rope有一个crystal分支,恕我直言,整体上Facefusion胜过,关键是在服务端无人值守情况下运行的能力,其他分支或多或少能使用命令行方式,但是只有Facefusion能完全调用自己的所有功能。多种面部修复甚至帧增强是其他分支所欠缺的。

Facefusion目前唯一需要加的功能是消除遮挡物的遮罩功能,有其他分支实现了这个功能,比如茶杯挡住了
脸,可以通过遮罩处理,但是必须要在图形界面操作,我希望未来Facefusion能实现且是自动处理遮挡物的
回复 支持 反对

使用道具 举报

13

主题

527

帖子

3792

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3792
发表于 2024-1-9 10:41:12 | 显示全部楼层
lucky1 发表于 2024-1-8 20:18
rope有一个crystal分支,恕我直言,整体上Facefusion胜过,关键是在服务端无人值守情况下运行的能力,其他 ...

rope crystal本来就是注重GUI的。
处理遮挡嘛,有遮挡模型,有CLIP。
超分目前有4个模型了。
还能调处理强度,以及对色彩/缩放细调等。

现在它不叫水晶(crystal)了,每个版本改个名字。。。蓝宝石,红宝石。。。

不过对比DFL的话,就算用多图换,该不自然的地方还是不自然。
回复 支持 反对

使用道具 举报

3

主题

108

帖子

1399

积分

初级丹圣

Rank: 8Rank: 8

积分
1399
发表于 2024-1-9 10:59:45 | 显示全部楼层
FaceFusion的主要模型应该是基于3D人脸重建来做的。
我最近也在用,主要是补充一些本来角度就不够的数据集。
整体来看DFL合成视频的稳定性和质量还是高,FaceFusion应该是没法很好的处理遮罩以及手动打标,这会导致
1.有一些极限角度的时候会贴错位置,或者识别不到脸部。DFL用MVE手动打标能解决这个问题。
2.遮罩问题,不像Xseg一样能更细节的处理遮罩。这点楼主也说了。
不过FaceFusion有很大的可取之处在于能够在数据集数目很少的时候使用,比如src只有几十张照片,缺乏大角度,FaceFusion可以补充很多表情和角度,当然极限角度因为面部识别点不准的原因也不能补充了。总之,比较看好这类基于3D重建的换脸方式。希望FaceFusion能把更多的自由度开放。
之前有些HiFiFace/SimSwap之类的,只是发了文章但没有给一个方便用的代码。roop/ FaceFusion算是在认真做事。
一个小八卦是,FaceFusion说是roop的一个成员在没有通知其他成员的情况下发布了不合适的视频,才觉得断更roop来做FaceFusion. 总感觉背后有许多故事...
回复 支持 反对

使用道具 举报

6

主题

60

帖子

1966

积分

初级丹圣

Rank: 8Rank: 8

积分
1966
 楼主| 发表于 2024-1-9 11:21:45 | 显示全部楼层
Aufheben 发表于 2024-1-9 10:59
FaceFusion的主要模型应该是基于3D人脸重建来做的。
我最近也在用,主要是补充一些本来角度就不够的数据集 ...

可能是有些故事,因为Facefusion的issue区能看出代码作者还是很自负的,长期保持2个issue,对于一个热门项目stars快10k了,很不寻常。当然作者有其傲慢的资本,最近几个版本从2之后代码结构改动很大

我发过issue问命令行如何使用多图,作者其实还是很善良,回复我后,立即关闭了这条问题反馈,看来有很重的洁癖啊,这是他的回复,分享给大家,因为你在文档里面是找不到相关内容的

henryruhs commented Dec 24, 2023 •

Just combine the -s arguments.

python run.py -s face1.jpg -s face2.jpg -s face3.jpg
回复 支持 反对

使用道具 举报

3

主题

108

帖子

1399

积分

初级丹圣

Rank: 8Rank: 8

积分
1399
发表于 2024-1-9 11:32:33 | 显示全部楼层
lucky1 发表于 2024-1-9 11:21
可能是有些故事,因为Facefusion的issue区能看出代码作者还是很自负的,长期保持2个issue,对于一个热门 ...

卧槽。。。学到了
回复 支持 反对

使用道具 举报

13

主题

527

帖子

3792

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3792
发表于 2024-1-10 12:26:31 | 显示全部楼层
对了LZ。
为啥我都用CodeFormer。
但是明显看到,大头时Facefusion相对模糊,而Rope ruby清晰一些呢。

特别是脸周围部分。
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-11-23 11:52 , Processed in 0.125411 second(s), 35 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表