deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 954|回复: 18

炼丹第四次进展报告,一个好的素材才是成功的关键之一

[复制链接]

39

主题

202

帖子

2911

积分

初级丹圣

Rank: 8Rank: 8

积分
2911
 楼主| 发表于 2024-8-12 12:12:21 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
本帖最后由 MLGB 于 2024-8-12 13:29 编辑

前面的几次报告中,可以看出炼丹目前进展还算是顺利,我的素材其实很不错,无论DST还是SRC 都是花钱买的,然后进行了切脸,然后写入了遮罩,我以为非常完美了,不再关注。。。。。

1.不过恰恰拉下了一个最重要的问题,那就是素材人脸五官特征,不清楚这个是否会写入,
2.眼嘴优先,侧脸优先的时候,是否根据写入的特征进行找点训练。
image.png
image.png


如果上述结论成立:(嘴角会根据写入的这些找点的话)
        1.如果想要开启眼嘴优先,那么至少要进行修复标注人脸部位特征,会根据特征进行找到对应的位置进行训练
        2.侧脸优先的话不清楚,不知道侧脸是根据什么来找到位置的
        3.如果没有修复,开了眼嘴,感觉是一场灾难。如果你的时间很多,可以不开嘴角等,一直这么练即可

以上推理是基于嘴角优先找人脸特征点标注进行模型的训练为基础推论得出,没看相关代码等。如果有错误还望指出,希望大家一起学习进步


回复

使用道具 举报

39

主题

202

帖子

2911

积分

初级丹圣

Rank: 8Rank: 8

积分
2911
 楼主| 发表于 2024-8-12 21:39:17 | 显示全部楼层
Deannnn 发表于 2024-8-12 17:51
有一说一,你这素材有点糊啊,是因为论坛压缩了?

应该是得
回复 支持 1 反对 0

使用道具 举报

40

主题

861

帖子

4680

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4680

万事如意节日勋章

发表于 2024-8-12 12:45:53 | 显示全部楼层
本帖最后由 pasanonic 于 2024-8-12 12:49 编辑

认不清楚人物特征的没必要留,这是人物切景的时候其中的一帧,可以删掉,你竟然还手动把鼻子勾出来,真有毅力,肯定是有完整侧脸的图帧
回复 支持 反对

使用道具 举报

39

主题

202

帖子

2911

积分

初级丹圣

Rank: 8Rank: 8

积分
2911
 楼主| 发表于 2024-8-12 13:27:06 | 显示全部楼层
pasanonic 发表于 2024-8-12 12:45
认不清楚人物特征的没必要留,这是人物切景的时候其中的一帧,可以删掉,你竟然还手动把鼻子勾出来,真有毅 ...

没有没有,这个是自动标注的,我认为标注的五官是错误的。
是不清楚眼嘴优先的时候是否用到了这快的标注。
回复 支持 反对

使用道具 举报

2

主题

69

帖子

391

积分

初级丹师

Rank: 3Rank: 3

积分
391
发表于 2024-8-12 14:19:44 | 显示全部楼层
佩服你的毅力
回复 支持 反对

使用道具 举报

39

主题

202

帖子

2911

积分

初级丹圣

Rank: 8Rank: 8

积分
2911
 楼主| 发表于 2024-8-12 14:33:51 | 显示全部楼层

啥毅力哦,你这都搞明白了么?
回复 支持 反对

使用道具 举报

2

主题

69

帖子

391

积分

初级丹师

Rank: 3Rank: 3

积分
391
发表于 2024-8-12 14:42:47 | 显示全部楼层
MLGB 发表于 2024-8-12 14:33
啥毅力哦,你这都搞明白了么?

没有看见你在评论区发表的那段话,我以为你是专门去mve修复了那个残缺人脸的landmark,所以佩服的的毅力,关于你此帖的内容,我现在去复习一下autoencoder的知识,和此帖可能会涉及到的方面,给出我的看法
回复 支持 反对

使用道具 举报

2

主题

69

帖子

391

积分

初级丹师

Rank: 3Rank: 3

积分
391
发表于 2024-8-12 14:47:40 | 显示全部楼层
我现在已经有了思路了,预计明天这个点之前,我会在我的帖子,最新的那个里面,介绍自动编码器的那部分下面,更新我的理解,届时会在此帖下面通知你,如果到时有帮助到你,希望你能给我的梯子点个赞,如果你有不同的看法,可以在我的那篇帖子里和我探讨,我会取一个更好的解释,并更新我的帖子,谢谢
回复 支持 反对

使用道具 举报

39

主题

202

帖子

2911

积分

初级丹圣

Rank: 8Rank: 8

积分
2911
 楼主| 发表于 2024-8-12 14:50:06 | 显示全部楼层
takisu88975 发表于 2024-8-12 14:42
没有看见你在评论区发表的那段话,我以为你是专门去mve修复了那个残缺人脸的landmark,所以佩服的的毅力 ...

请分享下关于这方面的知识文章把,我也想学习下。
回复 支持 反对

使用道具 举报

2

主题

69

帖子

391

积分

初级丹师

Rank: 3Rank: 3

积分
391
发表于 2024-8-12 14:51:17 | 显示全部楼层
MLGB 发表于 2024-8-12 14:50
请分享下关于这方面的知识文章把,我也想学习下。

好的相关的文献链接我到时也会更新
回复 支持 反对

使用道具 举报

13

主题

1049

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
12693
发表于 2024-8-12 16:24:12 | 显示全部楼层
MLGB 发表于 2024-8-12 13:27
没有没有,这个是自动标注的,我认为标注的五官是错误的。
是不清楚眼嘴优先的时候是否用到了这快的标注 ...

嘴眼优先只是生成了一个嘴眼遮罩区域的loss加到总的loss里。代码里写有。特征点不会输入进网络
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-11-21 23:56 , Processed in 0.158724 second(s), 37 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表