deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 2584|回复: 30

AMP模型基础测试,白天是天使,天黑后你才知道我是野兽!

[复制链接]

2

主题

24

帖子

127

积分

高级丹童

Rank: 2

积分
127
 楼主| 发表于 2022-2-19 00:45:35 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
本帖最后由 Matcher 于 2022-2-19 01:04 编辑

AMP模型基础测试,白天是天使,天黑后你才知道我是野兽!

使用自己刚操练的模型,仍未完成还在演进中,dst素材选了一些能考验模型真实还原能力的,就是说,抛开合成技巧,模型最终不会被dst带偏。
以下结果,如果你耐心看完,也许能够认同我的初步结论:
      AMP是迄今DFL训练最简单,耗时最少(眼口优先,扣出遮罩这些现在都是内置启用了,以前觉得快是因为关了这些表明快实际效果差), 还原能力最佳。
      但,对于特殊角度,个人合成技巧成为关键因素,但是这不是AMP模型本身的错,保持自身的还原能力才是我们需要的。我的测试也能看出,不同的脸型差异参数选择是不同的,受限时间没有太多测试,你能让AMP模型合成最终达到什么效果,模型训练和合成技巧是并别的2大关键因素,合成技巧我还在学习中。
      一句话,AMP模型提供了迄今其他类型所能提供的最多可能性,剩下的真的只是合成技巧了



----
以下dst都是合在同一批一起训练的,大约6小时,合成参数不同

----

dst1

比较常规的角度


   fca 3.jpg      to    fca 3_res1.png

-

dst2 :

这个的考验,本人认为在于此角度朱莉左脸轮廓的S形超过很多人


fcc 1.jpg    to   fcc 1_res2.jpg


dst3 :

默克尔的头确实比较大,模型没有大的问题,我的合成技巧很难兼顾发型,或许本身最后的合成遮罩就选错了

fcc 6.jpg      to    fcc 6_res2.jpg


dst4 :

模型确实训练还不足,毕竟只有30多万次,表情角度都未到位,唯一能肯定的是AMP不会被带偏。右脸轮廓确实是src的实际轮廓,如果要更好需要降低morph actor,这里使用的是0.9.

fcc 3.jpg   to   fcc 3_res1.jpg


dst5 :

同上

fcc 4.jpg   to   fcc 4_res1.jpg

dst6 :

这个,只是一种对模型还原能力的探索,看看就好

fcc 8.jpg   to   fcc 8_res1.jpg


---

本来还有一些,论坛限制了上传,算了,还有金毛约翰逊、环保少女、甚至怪物史莱克(确实可以,但是最终融合太难,没有太多实际意义但确实吓了我一跳),合成过程给我很多启发,图无法上了


最后的忠告,大胆尝试,AMP模型值得拥有,合成改进还有其他途径,我已经尝试使用剪映软件先对dst视频瘦脸,甚至多次瘦脸,大大减少了合成难度(但是注意切图会出现无法识别仍需再次转录,试了你就知道,其实DFL年代感已经很强了。。。)

附带模型参数AMP

morph list.jpg


==     Current iteration: 344626               ====                                             ====--------------- Model Options ---------------====                                             ====            resolution: 256                  ====             face_type: wf                   ====     models_opt_on_gpu: True                 ====               ae_dims: 448                  ====            inter_dims: 512                  ====                e_dims: 112                  ====                d_dims: 112                  ====           d_mask_dims: 22                   ====          morph_factor: 0.5                  ==



迭代总计 34万,最终lrd开的情况loss到0.3,还有很大提升空间, src素材 1700张左右,考虑到这些,AMP是我今后的唯一选择,前期还练了一个liae-udt的,也扔了时间耗不起

请各位朋友指正,无论是AMP模型本身的训练细节,还是本人现今仍然很肤浅的合成技巧,均欢迎发表宝贵意见


再见!

回复

使用道具 举报

40

主题

475

帖子

5240

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
5240
发表于 2022-2-19 00:50:59 | 显示全部楼层
大佬牛啊,刚准备入手AMP
回复 支持 反对

使用道具 举报

0

主题

1463

帖子

8409

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
8409

万事如意节日勋章

发表于 2022-2-19 02:13:46 | 显示全部楼层
大胆尝试,值得鼓励
回复 支持 反对

使用道具 举报

2

主题

78

帖子

2401

积分

初级丹圣

Rank: 8Rank: 8

积分
2401
发表于 2022-2-19 05:22:12 | 显示全部楼层
[img]%5Burl=https://www.linkpicture.com/view.php?img=LPic62100dd127c1e558419257%5D[/url][/img]

用AMP一直都有脸部的问题。你有这个问题吗?
回复 支持 反对

使用道具 举报

0

主题

515

帖子

3433

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3433
发表于 2022-2-19 06:28:18 | 显示全部楼层
看起来很有难度。
回复 支持 反对

使用道具 举报

5

主题

518

帖子

5685

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
5685
发表于 2022-2-19 08:01:50 | 显示全部楼层
来学习学习 围观一下
回复 支持 反对

使用道具 举报

2

主题

285

帖子

2434

积分

初级丹圣

Rank: 8Rank: 8

积分
2434

万事如意节日勋章

发表于 2022-2-19 08:27:09 | 显示全部楼层
学习学习。
回复

使用道具 举报

10

主题

2836

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
17198

万事如意节日勋章

发表于 2022-2-19 10:06:35 | 显示全部楼层
才知道是野兽。。。。。。。。。。。。。。。
回复 支持 反对

使用道具 举报

0

主题

606

帖子

3716

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3716
发表于 2022-2-19 10:22:02 | 显示全部楼层
感谢分享
回复

使用道具 举报

2

主题

24

帖子

127

积分

高级丹童

Rank: 2

积分
127
 楼主| 发表于 2022-2-19 10:28:12 | 显示全部楼层
ruah1984 发表于 2022-2-19 05:22
[/url][/img]

用AMP一直都有脸部的问题。你有这个问题吗?

你这个感觉是素材或遮罩的问题,最好是每训练一定时间检查一下预览图,比较容易发现问题。但是很确定不是AMP模型本身的问题
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-9-21 03:36 , Processed in 0.120236 second(s), 10 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表