deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
12
返回列表 发新帖
楼主: 寂寞的风

做vr换脸,用什么显卡好?

[复制链接]

1

主题

7

帖子

940

积分

高级丹师

Rank: 5Rank: 5

积分
940
 楼主| 发表于 昨天 20:35 | 显示全部楼层
小飞侠 发表于 2025-9-15 18:03
训练模型的话,预算如果还可以,推荐4070那个super 16g版,或者4080,3090,4090系列,新出的50系列有些版 ...

谢谢,想知道的就是这个具体的东西。
回复 支持 反对

使用道具 举报

9

主题

71

帖子

4741

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4741
发表于 2 小时前 | 显示全部楼层
本帖最后由 lispmox 于 2025-9-16 16:40 编辑

我尝试换过不少8K VR视频,还算有点经验:

1. 对于8K,320的分辨率清晰度不够,448-512分辨率勉强够。实际上大多数人训练出来的512分辨率模型的局部细节并不清晰,需要非常高质量的素材和训练时间慢慢磨,否则皮肤纹理等细节在VR的变形放大下也会很模糊。

2. 一种取巧的办法是采用CodeFormer等模型在换脸期间进行修复到512分辨率,这个模型会添加很多局部细节,此时DFL的模型分辨率控制在224-320即可,差不多是8-16G显卡能支持的范围。缺点是会损失相似度,并且牙齿表情等细节可能有问题。

3. 直接对原始VR视频切脸的效果很差,而且脸部有畸变导致DFL换出来的脸无法贴合。我是专门为VR重写了一个合成器,首先把VR的原始视频投影到正常人眼的视角下,然后检测+换脸,最后再还原回去,最大程度避免畸变。论坛里有作者用ffmpeg做了类似操作,你可以搜索到。

4. 再怎么高清的模型,换出来的VR视频都会有重影,这是因为VR视频左右眼看到的是三维空间物体在两个镜头下的投影,而DFL模型并不是在三维空间下进行建模,换脸后会存在不对齐的现象。模型精度越高这种重影会越少,但不可能完全消除。
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2025-9-16 19:25 , Processed in 0.098271 second(s), 26 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表