deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 332|回复: 12

pytorch开发的类似dfl的换脸

[复制链接]

35

主题

236

帖子

1812

积分

初级丹圣

Rank: 8Rank: 8

积分
1812
 楼主| 发表于 3 天前 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
本帖最后由 day270010678 于 2026-7-28 18:59 编辑

pytorch开发的类似dfl的换脸,部分完成,有人说让上传,他们来帮助试验,我就发源码到https://github.com/lysx888/DeepFaceLab-PyTorch/tree/main了,需要的下载,请懂技术的下载,暂时不支持不懂技术的,因为我没发布软件包,也就是需要独立安装需要的python模块,并且一直在调试更新,所以不懂技术的下载没多大用。现在的开发重点就是模型训练,正在调试修正这个。.....我为了最小化cpu,所以假如了pytorch的环境限制,也就是并行,测试者请自行修改根据你的要求。
其实我们开发的最好思路是,利用实时换脸,先初次换脸,然后把初次换脸的作为基础,然后去重新训练细节,这样可以既保留类似dfl的换脸,高精度,高细节,同时我们可以高效率训练,假如用dfl去从基础训练,这个相当于几十个小时的训练,我们只需要在后续继续训练几个小时,甚至十几个小时就可以彻底实现高质量,达到换脸极限清晰和质量。这是思路,我没加入(以后再开发),随着大模型的开源,以前没机会,现在完全实现。
本来用TFM架构,用Transformer编码器 + StyleGAN2解码器 + AdaIN身份注入架构实现换脸,但是我发现个问题,似乎TFM架构天生就是为了“生成”而存在的,虽然他仍然属于GAN+身份注入范畴,而DFL的模型仅仅是为了用a换b的脸,跟生成不搭边,测试了两天,无论怎么调,也不能实现换脸,只能生成脸,主要是StyleGAN2+ AdaIN太强大了,现在只能用TFM架构,采用dfl的方式,编码器加解码器来实现换脸,感觉有点鸡肋,挂狗头卖羊肉的感觉,算了,暂时还是实现dfl的架构吧,这个好实现,保留TFM架构,留着以后看看能否把生成变为换脸,有高人的话,指点下,他们怎么实现换脸的。假如用TFM用src头像去生成我们需要的dst头像,这个可以实现(这个需要大量的素材,并且简单的训练似乎完全没必要),但是假如用a脸换b脸,而不是生成,假如有人解决了,提供个方案,我看看。
正在修改....


1.png
2.png
3.png
4.png
5.png
6.png
7.png
8.png

评分

参与人数 1贡献 +1 收起 理由
gotoplay + 1

查看全部评分

回复

使用道具 举报

35

主题

236

帖子

1812

积分

初级丹圣

Rank: 8Rank: 8

积分
1812
 楼主| 发表于 3 天前 | 显示全部楼层
luckXu 发表于 2026-7-26 22:57
狠人啊,直接放源码。

个人爱好,不怕任何人用,大家一起努力说不定都抛弃dfl,我不怕任何人滥用,但是要是他们敢赚钱,我就敢完善功能,保证比他们的软件好,并且永远是开源免费。
回复 支持 1 反对 0

使用道具 举报

8

主题

272

帖子

1807

积分

初级丹圣

Rank: 8Rank: 8

积分
1807

万事如意节日勋章

发表于 3 天前 | 显示全部楼层
狠人啊,直接放源码。
不要问我爱不爱你
我的余光中里都是你
回复 支持 反对

使用道具 举报

发表于 前天 00:10 | 显示全部楼层
大神,只能膜拜了,希望打败原版的繁琐流程吧
回复 支持 反对

使用道具 举报

91

主题

1688

帖子

8825

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
8825

万事如意节日勋章开心娱乐节日勋章

发表于 前天 07:51 | 显示全部楼层
希望参加测试一下只能等软件包了
回复 支持 反对

使用道具 举报

0

主题

139

帖子

2944

积分

初级丹圣

Rank: 8Rank: 8

积分
2944

万事如意节日勋章

发表于 前天 09:01 | 显示全部楼层
感谢开源
看了下,sam2.1都加进去了,是用于遮罩分割人脸吗?
希望后续加入更多大模型
回复 支持 反对

使用道具 举报

8

主题

272

帖子

1807

积分

初级丹圣

Rank: 8Rank: 8

积分
1807

万事如意节日勋章

发表于 前天 14:49 | 显示全部楼层
day270010678 发表于 2026-7-26 18:12
个人爱好,不怕任何人用,大家一起努力说不定都抛弃dfl,我不怕任何人滥用,但是要是他们敢赚钱,我就敢 ...

膜拜
不要问我爱不爱你
我的余光中里都是你
回复 支持 反对

使用道具 举报

35

主题

236

帖子

1812

积分

初级丹圣

Rank: 8Rank: 8

积分
1812
 楼主| 发表于 前天 17:40 | 显示全部楼层
july 发表于 2026-7-27 09:01
感谢开源
看了下,sam2.1都加进去了,是用于遮罩分割人脸吗?
希望后续加入更多大模型 ...

呃,这个可以用于后续开发些其他功能,我没想好,比方说遮罩中的面部分割,姿态旋转,捏脸等等,甚至后续可以加入ai模型比方说wan模型等等,都需要这个玩意,所以我就加入了,具体功能根据想法弄。以后再说,反正加入这个没错,哪怕没开发,留给牛人去开发吧
回复 支持 反对

使用道具 举报

40

主题

241

帖子

1687

积分

初级丹圣

Rank: 8Rank: 8

积分
1687
发表于 前天 20:07 | 显示全部楼层
大佬加油 牛逼
回复 支持 反对

使用道具 举报

7

主题

73

帖子

936

积分

高级丹师

Rank: 5Rank: 5

积分
936
发表于 前天 21:44 | 显示全部楼层
支持开源
回复

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2026-7-29 02:57 , Processed in 0.134876 second(s), 41 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表