deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 881|回复: 5

请教 画遮罩 训练遮罩 具体怎么操作的疑问

[复制链接]

6

主题

35

帖子

892

积分

高级丹师

Rank: 5Rank: 5

积分
892

万事如意节日勋章

 楼主| 发表于 2024-1-25 19:55:11 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
本帖最后由 yty9 于 2024-1-25 20:38 编辑

画遮罩:
1.将万能遮罩模型写入DST图片(多余操作?)
2.虚线补充想保留的部分 如眼镜 另需实线完整画一遍轮廓,(如果只虚线补充,没有实线区域,遮罩无效?训练时第二列全黑,损失为0)
3.画完线没有应用或保存按键,点击下一张即保存?可直接关闭窗口
4.画遮罩轮廓线条不精准贴合有没有影响,是否训练可逐渐学习至精准?
训练:
1.DST-aligned下只放画好遮罩的几张图片,不放其他文件,SRC下为空文件夹
训练学习这几张遮罩到模型里?(还是说SRC放画了遮罩的,DST放没画的图,训练给DST图片画遮罩?)
2.训练时图片旋转 镜像 扭曲 变色 分辨率改变均为正常过程?
3.训练到什么状态可以结束,损失降到多少?还是肉眼看遮罩效果 实线替换范围区域由绿色转为肤色?

回复

使用道具 举报

7

主题

871

帖子

5788

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
5788

万事如意节日勋章

发表于 2024-1-26 09:12:21 | 显示全部楼层
画遮罩:
1,如果自己训练xseg遮罩就不用这一步,用了万能遮罩就没必要再进行其他操作
2,对dst来说完全正确. 记住一点就行了,不管dst还是src,实线部分是参与训练/替换的,虚线部分是不参与训练/替换的.虚线可有可无但是不能只画虚线不画实线.
3,点下一张/上一张即可自动保存,然后可以直接关闭窗口.
4,不用100%精准,但要求尽量精准,误差大了会影响训练效果(需要训练的部分没训练到,不需要训练的部分训练上了,以及合成时候的瑕疵感),画遮罩尽量统一(距离边缘统一,src和dst统一,比如不要一部分包含发髻阴影一部分不包含).
训练:
1,align里都不用动,只需要画好遮罩然后训练就行了,xseg训练是两个一起训练的,没画的图也不要拿走,也要参与训练的,不然训练就没多大意义了.src或dst其中一个为空也没关系,就是单独训练其中一个.
2,均为正常,图形界面按空格可以分别查看src/dst的训练效果
3,图形界面按空格键切换src/dst的训练效果图,精准度达到要求并且边缘光滑,就可以停止了,损失率大小不用管,但是需要观察有没有很突兀的反复出现的某个特别高的loss值,或者目测遮罩某张或某些图遮罩某部分反复变化,这种可能是遮罩虚线/实线忘了切换画错了.就需要返回检查修改.

建议坛子里下载个xseg镇坛之宝留作底丹,在此基础上自己再进行训练,可以节约99.9%的训练时间.
回复 支持 2 反对 0

使用道具 举报

5

主题

118

帖子

757

积分

高级丹师

Rank: 5Rank: 5

积分
757

万事如意节日勋章

发表于 2024-1-26 10:31:19 | 显示全部楼层
lknet 发表于 2024-1-26 09:12
画遮罩:
1,如果自己训练xseg遮罩就不用这一步,用了万能遮罩就没必要再进行其他操作
2,对dst来说完全正确.  ...

言简意赅,负有条理,灰常全面,同意
回复 支持 反对

使用道具 举报

10

主题

476

帖子

5559

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
5559

万事如意节日勋章

发表于 2024-1-26 10:43:12 | 显示全部楼层
補充一下訓練:1 的訓練遮罩觀念

通常DST會有上千甚至上萬張照片,
比如說有6千張照片,你大概畫個1%  60張 (是10%還是1%我忘了 哈)

訓練就是
你用這60張給AI說    這6千張的遮罩都要像這60張一樣
然後AI就依照那60張把其他6千張弄好(使用應用遮罩)
所以你剩下的那些沒畫遮罩的都要留下來
AI主要也是在訓練那些沒畫的遮罩,只留你畫的遮罩你都畫好了AI也不用訓練了

然後這60張照片怎麼選就很重要了,
還有萬能遮罩丹就是在眾多"優秀"的其他DST這些"60張"手動畫出來的遮罩所練出來的遮罩丹
當然有些是特地找一些複雜的圖畫一些精緻遮罩
回复 支持 反对

使用道具 举报

6

主题

35

帖子

892

积分

高级丹师

Rank: 5Rank: 5

积分
892

万事如意节日勋章

 楼主| 发表于 2024-1-26 18:25:45 | 显示全部楼层
lknet 发表于 2024-1-26 09:12
画遮罩:
1,如果自己训练xseg遮罩就不用这一步,用了万能遮罩就没必要再进行其他操作
2,对dst来说完全正确.  ...

感谢回复 很详细 明白了
回复 支持 反对

使用道具 举报

6

主题

35

帖子

892

积分

高级丹师

Rank: 5Rank: 5

积分
892

万事如意节日勋章

 楼主| 发表于 2024-1-26 18:27:23 | 显示全部楼层
z6163727 发表于 2024-1-26 10:43
補充一下訓練:1 的訓練遮罩觀念

通常DST會有上千甚至上萬張照片,

明白了 感谢
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-11-23 09:19 , Processed in 0.165061 second(s), 35 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表