deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 876|回复: 6

求教,关于阿黑颜的训练方式(对眼,白眼)

[复制链接]

1

主题

8

帖子

145

积分

高级丹童

Rank: 2

积分
145
 楼主| 发表于 2023-10-21 23:50:39 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
本帖最后由 Regnal 于 2023-10-21 23:50 编辑

这两天在训练某一人物的阿黑颜表情,但是一些极端的眼球角度还是没法训练出来,求大神解答一下是我训练思路错了还是参数错了呢?以下是我的思路

这个模型是在底丹的基础上又训练了30w次的一个模型,除了一些极端表情其他都训练的差不多了。
我训练阿黑颜的第一步是在未改动src素材的情况下直接训练的,把眼睛嘴巴优先给打开了,但是我发现这样训练得很慢,因为src里面没有对应的素材,接着我就想到了用SD生成src素材来训练,我生成了大概30张左右的src素材(同一人物),这下再跑了3w左右眼睛就逐渐和dst的对眼比较相似了,接着又合成了一次,挑选了几张和src比较相似的丢进去继续训练。


现在的问题是:1,一些素材上面眼睛会模糊,不知道是不是训练不到位的问题。2,一些完全对眼的素材只能对眼对一半,没有办法达到dst素材的对眼程度。

以下是训练参数


                  模型名字: Vivian1_SAEHD

                  当前迭代: 741847

----------------------模型选项----------------------

            resolution: 224
             face_type: wf
     models_opt_on_gpu: True
                 archi: df-d
               ae_dims: 192
                e_dims: 48
                d_dims: 48
           d_mask_dims: 16
       masked_training: True
       eyes_mouth_prio: True
           uniform_yaw: True
         blur_out_mask: False
             adabelief: True
            lr_dropout: y
           random_warp: False
      random_hsv_power: 0.0
       true_face_power: 0.0
      face_style_power: 0.001
        bg_style_power: 0.0
               ct_mode: none
              clipgrad: False
              pretrain: False
       autobackup_hour: 0
write_preview_history: False
           target_iter: 0
       random_src_flip: False
       random_dst_flip: True
            batch_size: 8
             gan_power: 0.1
        gan_patch_size: 36
              gan_dims: 16
              猫之汉化免费丹 : 564646676
                  盗卖死妈: 生孩子全身都是痔疮
                  请自重!: 请自重!
                  AI王子: dapixiao
                  西行之巅: 奥贝赛维
                都是死妈骗子: 小心!

----------------------运行信息----------------------

                  设备编号: 0
                  设备名称: NVIDIA GeForce RTX 3070
                  显存大小: 5.33GB

================================================
猫之汉化
出售模型、商业换脸程序开发、商业换脸视频定制
QQ\微信:564646676
淘宝店地址:http://t.hk.uy/4ks
=============================================

启动中. 按回车键停止训练并保存进度。

保存时间|迭代次数|单次时间|SRC损失|DST损失
[16:50:18][#742201][0465ms][0.2777][0.3732]

回复

使用道具 举报

215

主题

1995

帖子

66万

积分

管理员

Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96Rank: 96

积分
667576

隐世金马甲勋章超级版主勋章可爱萌新勋章见习版主勋章荣誉会员勋章男同管理员-无尚荣耀勋章优质版主勋章小有贡献勋章

发表于 2023-10-22 00:29:33 | 显示全部楼层
素材不够多
提供数字人直播服务、文字/音频驱动数字人服务,有意者联系我QQ563861181
全站默认解压密码dfldata.xyz
DFL交流QQ群五群974612885
AI绘画交流QQ群710238550
我的B站账号:特看科技的滚石   其他自称彦祖的不是我,请勿上当
回复 支持 1 反对 0

使用道具 举报

1

主题

8

帖子

145

积分

高级丹童

Rank: 2

积分
145
 楼主| 发表于 2023-10-22 00:38:23 | 显示全部楼层

果然是这个原因……那我再用sd跑点素材出来,顺便问问大佬像我这种后面追加训练的情况我上面的参数有需要改的吗
回复 支持 反对

使用道具 举报

1

主题

8

帖子

145

积分

高级丹童

Rank: 2

积分
145
 楼主| 发表于 2023-10-22 04:56:47 | 显示全部楼层
更新一下,问题解决了,确实是楼上滚石大佬说的素材不够的问题,我又用sd跑了70张阿黑颜的素材出来,训练了3w次效果就很好了
回复 支持 反对

使用道具 举报

0

主题

206

帖子

4584

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4584
发表于 2023-10-23 05:09:27 | 显示全部楼层
最好多放点不同角度的阿黑颜src
回复 支持 反对

使用道具 举报

8

主题

94

帖子

1008

积分

初级丹圣

Rank: 8Rank: 8

积分
1008
发表于 2023-10-23 09:16:55 | 显示全部楼层
dst的拿几张放src里,再合成dst,再放回src
回复 支持 反对

使用道具 举报

6

主题

215

帖子

1871

积分

初级丹圣

Rank: 8Rank: 8

积分
1871
发表于 2023-10-25 15:34:53 | 显示全部楼层
温馨提示 记得多弄点不同角度的哦
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-9-24 03:20 , Processed in 0.105522 second(s), 11 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表