|
发表于 2023-8-29 13:20:27
|
显示全部楼层
1、空丹从哪里来?
- 从0开始新建模型,通常不推荐。
- 复用别人的模型,需要多对比,找个好的。
- 用FFHQ/CelebA等数据集预训练模型,SEAHD,我试过ICE版本从头来也很快。木兰的话仅2、3天就搞定个224的模型。
注意模型类型和参数定了以后是不能改的(只能改训练参数),所以建议不熟悉先尝试小点的模型,否则很浪费时间。
Quick96:Predefined model; useful for testing. DF-UD, Full Face, Resolution: 96, Batch size: 4
简单尝试快速出结果,因为有训练数据,但分辨率太低,量变引起质变,最终效果不怎么好。
SAEHD:Sparse Auto Encoder HD. The standard model and trainer for most deepfakes.
正常都用这个,”别人的模型“大多也是这个类型。
AMP:Amplifier. Destination facial expressions are amplified to the source.
好像用于实时的DFLive效果比较好。
Mulan:DF-ICE版本提供的新的独创训练架构-木兰,有多种算法,ICE-V3,V4,V7。
就是速度更快,对高分辨率、新40显卡支持更好,细节学习比对抗网络更强,支持多层遮罩合成(不过我没试过呀)。
具体请看ICE版发布原帖吧。
————————————————
版权声明:本文为CSDN博主「若苗瞬」的原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接及本声明。
原文链接:https://blog.csdn.net/ddrfan/article/details/132290207
2、素材哪里找
用自己的照片。
当然后来我发现大家都不是这么玩的……就来自影视作品,综艺访谈吧(但你用明星是侵犯肖像权)。
素材前期处理很重要,对于src来说:角度表情分布均匀,妆容统一,无遮挡或有正确的遮罩,脸部定位准确。
素材好,后面训练才能真的好。
所以各种辅助工具,其实都是在前期帮助处理素材。
最重要的是:
- 角度查看(这个不见得很准确,但是可以统计参考)。
- 遮罩/定位点查看(一定要正确)。
还有:
- 快速切脸(节约时间)
- 分人物,按分辨率等统计(去除干扰)
- 适当增强。
3、训练步骤怎么操作
一言难尽,看教程吧。。。
|
|