deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
12
返回列表 发新帖
楼主: zhulashi

求助各位大大,关于src脸图的!谢谢

[复制链接]

31

主题

243

帖子

3262

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3262
 楼主| 发表于 2023-7-20 20:28:04 | 显示全部楼层
国际狄拉克 发表于 2023-7-20 15:17
不太懂你的意思,你说的训练正脸照是指:

1. 把他的数据集放到src里的aligned来训练,最后通过merge合成 ...

@2. 把他的数据集放到dst的aligned里进行训练,通过训练出来的模型,来逐渐合成素人的正脸照。我认为是可行的,大多数人的数据集是缺少大角度的俯视仰视和侧脸照,而你是缺少正脸照,通过这种方式生成正脸照也是角度补全的方法。

我也不太会形容,但是应该就是这样
回复 支持 反对

使用道具 举报

31

主题

243

帖子

3262

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3262
 楼主| 发表于 2023-7-20 20:30:05 | 显示全部楼层
国际狄拉克 发表于 2023-7-20 15:17
不太懂你的意思,你说的训练正脸照是指:

1. 把他的数据集放到src里的aligned来训练,最后通过merge合成 ...

不是缺少正脸照,而是其他角度没有
回复 支持 反对

使用道具 举报

9

主题

129

帖子

1583

积分

初级丹圣

Rank: 8Rank: 8

积分
1583

稀奇古怪节日勋章

发表于 2023-7-20 20:51:43 | 显示全部楼层
zhulashi 发表于 2023-7-20 20:30
不是缺少正脸照,而是其他角度没有

重新描述一下:

把他的数据集放到dst的aligned里进行训练,通过训练出来的模型,来逐渐合成素人的其他角度

是这个意思吧?

我觉得是可行的,这就是src角度补全。

可以参考一下这篇帖子,
金鱼基础模型库】用于补全SRC极限角度https://dfldata.cc/forum.php?mod=viewthread&tid=4327&highlight=%E9%87%91%E9%B1%BC

理论就是通过ai合成素人的其他角度照片。



方法
1. 通过训练ai,合成新的角度的照片。刚开始可能合成的角度很不科学,但是总有一些角度是好看的,合适的。
2. 把这些ai合成的,合适的照片提取人脸后移动到src里,让ai去学习新放入的照片,根据新的照片再去合成新的,更大的角度。
3. 不断地循环执行 1,2 两个步骤,让ai逐渐生成素人更大的角度照片。


注意:
1. 挑选照片放进src,合成的新照片 都尽量要高清图片。否则,如果src里充满了模糊的照片,即使补全了角度,最后拿来使用训练出来的模型效果也是模糊的。
2. 注意dst的挑选,ai合成的照片在某种程度上会和dst有点相似,如果dst里有很多很丑的人,那么合成的照片也有可能会有点丑,尽量挑选合适的dst。


回复 支持 反对

使用道具 举报

9

主题

129

帖子

1583

积分

初级丹圣

Rank: 8Rank: 8

积分
1583

稀奇古怪节日勋章

发表于 2023-7-20 20:56:59 | 显示全部楼层
zhulashi 发表于 2023-7-20 15:01
我自己网上找的素人照片漂亮是漂亮,但是只有一张正面照

如果你的src最开始只有一张照片,难度会很高很高。

建议:
1. 先使用roop换脸(这个roop即使只有一张照片,也可以进行换脸)
2. 将roop换脸出来的视频,使用dfl切图,这样能得到很多src
3. 挑选合适的src进行角度补全

除非你觉得roop的换脸已经足够了,不然还是建议进行补全,之后再用来dfl换脸
回复 支持 反对

使用道具 举报

31

主题

243

帖子

3262

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3262
 楼主| 发表于 2023-7-21 19:13:16 | 显示全部楼层
国际狄拉克 发表于 2023-7-20 20:51
重新描述一下:

把他的数据集放到dst的aligned里进行训练,通过训练出来的模型,来逐渐合成素人的其他角 ...

真心感谢大大,现在终于懂点了,之前我自己一头雾水,以为通过素人的正脸照,就可以合成视频了
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-9-23 19:22 , Processed in 0.082248 second(s), 9 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表