deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
12
返回列表 发新帖
楼主: 寂寞的风

做vr换脸,用什么显卡好?

[复制链接]

1

主题

10

帖子

1205

积分

初级丹圣

Rank: 8Rank: 8

积分
1205
 楼主| 发表于 2025-9-15 20:35:54 | 显示全部楼层
小飞侠 发表于 2025-9-15 18:03
训练模型的话,预算如果还可以,推荐4070那个super 16g版,或者4080,3090,4090系列,新出的50系列有些版 ...

谢谢,想知道的就是这个具体的东西。
回复 支持 反对

使用道具 举报

9

主题

72

帖子

4857

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4857
发表于 2025-9-16 16:29:57 | 显示全部楼层
本帖最后由 lispmox 于 2025-9-16 16:40 编辑

我尝试换过不少8K VR视频,还算有点经验:

1. 对于8K,320的分辨率清晰度不够,448-512分辨率勉强够。实际上大多数人训练出来的512分辨率模型的局部细节并不清晰,需要非常高质量的素材和训练时间慢慢磨,否则皮肤纹理等细节在VR的变形放大下也会很模糊。

2. 一种取巧的办法是采用CodeFormer等模型在换脸期间进行修复到512分辨率,这个模型会添加很多局部细节,此时DFL的模型分辨率控制在224-320即可,差不多是8-16G显卡能支持的范围。缺点是会损失相似度,并且牙齿表情等细节可能有问题。

3. 直接对原始VR视频切脸的效果很差,而且脸部有畸变导致DFL换出来的脸无法贴合。我是专门为VR重写了一个合成器,首先把VR的原始视频投影到正常人眼的视角下,然后检测+换脸,最后再还原回去,最大程度避免畸变。论坛里有作者用ffmpeg做了类似操作,你可以搜索到。

4. 再怎么高清的模型,换出来的VR视频都会有重影,这是因为VR视频左右眼看到的是三维空间物体在两个镜头下的投影,而DFL模型并不是在三维空间下进行建模,换脸后会存在不对齐的现象。模型精度越高这种重影会越少,但不可能完全消除。
回复 支持 1 反对 0

使用道具 举报

1

主题

10

帖子

1205

积分

初级丹圣

Rank: 8Rank: 8

积分
1205
 楼主| 发表于 2025-9-17 14:51:05 | 显示全部楼层
lispmox 发表于 2025-9-16 16:29
我尝试换过不少8K VR视频,还算有点经验:

1. 对于8K,320的分辨率清晰度不够,448-512分辨率勉强够。实际 ...

感谢,太详细了。看来买16g的显卡才差不多。看了vr,普通的视频看不下去,基本没留几部了,缺乏身临其境的感觉。
能做就行,vr本身就需要精挑细选,剪辑好一段精品,比十个庸品都好。

普通视频,是看二维,空间感是脑部幻想的。看3d,是隔着窗户。只有vr,是身临其境的体验。可能是需要眼镜花钱门槛,挡住了大多数人,否则我觉得vr能占据九成的视频了。

回复 支持 反对

使用道具 举报

8

主题

42

帖子

501

积分

高级丹师

Rank: 5Rank: 5

积分
501
发表于 2025-9-17 17:59:01 | 显示全部楼层
lispmox 发表于 2025-9-16 16:29
我尝试换过不少8K VR视频,还算有点经验:

1. 对于8K,320的分辨率清晰度不够,448-512分辨率勉强够。实际 ...

切回原视角的程式能分享一下吗
回复 支持 反对

使用道具 举报

9

主题

72

帖子

4857

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4857
发表于 2025-9-17 19:29:03 | 显示全部楼层
s1005220 发表于 2025-9-17 17:59
切回原视角的程式能分享一下吗

群里有一个大佬给的方案https://dfldata.cc/forum.php?mod=viewthread&tid=8270
我只是写了一个程序把这个方案自动化了,并做了一些加速操作
回复 支持 反对

使用道具 举报

8

主题

42

帖子

501

积分

高级丹师

Rank: 5Rank: 5

积分
501
发表于 2025-9-19 13:57:58 | 显示全部楼层
lispmox 发表于 2025-9-17 19:29
群里有一个大佬给的方案https://dfldata.cc/forum.php?mod=viewthread&tid=8270
我只是写了一个程序把这 ...

我知道这个文章 请问能分享你写的程序吗
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2025-11-8 06:38 , Processed in 0.096446 second(s), 26 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表