deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 772|回复: 8

有一个利用src局部的想法各位大佬是否实验过?

[复制链接]

7

主题

183

帖子

995

积分

高级丹师

Rank: 5Rank: 5

积分
995
 楼主| 发表于 2022-7-14 13:15:25 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
就是手动改绘制遮罩的时候我之框出嘴巴部分或者眼睛部分。这样就可以把某个不同任务的面部特征的一部分单独训练到模型里面去,以影响最后的效果。
比如我训练的时候src的嘴唇较dst的厚,所以训练的时候,dst嘴唇微张的某些角度,训练出来是闭嘴的效果。当我插入一定数量的dst只保留嘴部遮罩的素材后,训练下来能否明显改善嘴唇的张开效果更加接近dst。同时不影响其它五官的主要效果。

回复

使用道具 举报

7

主题

183

帖子

995

积分

高级丹师

Rank: 5Rank: 5

积分
995
 楼主| 发表于 2022-7-15 10:48:01 | 显示全部楼层
发现可能是之前用了没有排除眼鼻的素材已经训练到模型里面,所以已经建立了部分角度的训练模型。后面即使排除了眼鼻,也无法改写原来已经学习的信息。从一开始就做好处理训练,似乎没有很明显的问题了。等多训一会再看效果。
回复 支持 1 反对 0

使用道具 举报

14

主题

343

帖子

3182

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3182
发表于 2022-7-14 14:58:35 | 显示全部楼层
坐等研究成果
回复 支持 反对

使用道具 举报

7

主题

867

帖子

5747

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
5747

万事如意节日勋章

发表于 2022-7-14 17:18:01 | 显示全部楼层
猜想结果很可能完全用dst的嘴了,因为匹配度1:1最高.倒可以试试用dst人物其它非合成用的素材或第三方人物的素材集参与训练.
回复 支持 反对

使用道具 举报

7

主题

183

帖子

995

积分

高级丹师

Rank: 5Rank: 5

积分
995
 楼主| 发表于 2022-7-14 18:00:12 | 显示全部楼层
lknet 发表于 2022-7-14 17:18
猜想结果很可能完全用dst的嘴了,因为匹配度1:1最高.倒可以试试用dst人物其它非合成用的素材或第三方人物的 ...

短时间实验了下,部分图确实是显著的改善了嘴部的效果跟DST的开合和大小更接近了。但是又不完全像dst。算是满意的结果。但是也有个别图整体都串到很像dst了。。。
回复 支持 反对

使用道具 举报

50

主题

1223

帖子

8020

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
8020
发表于 2022-7-14 18:46:16 | 显示全部楼层
所有向SRC中掺假的行为,都是不好的
回复 支持 反对

使用道具 举报

11

主题

2624

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
14162

真我风采勋章万事如意节日勋章

发表于 2022-7-14 23:20:17 | 显示全部楼层
表情不对就关闭遮罩算全图。最后肯定会到位
无非就是时间耗费久点罢了,比你手动忙和省事的多,多挂机就完事了。
回复 支持 反对

使用道具 举报

7

主题

183

帖子

995

积分

高级丹师

Rank: 5Rank: 5

积分
995
 楼主| 发表于 2022-7-15 09:14:24 | 显示全部楼层
wtxx8888 发表于 2022-7-14 23:20
表情不对就关闭遮罩算全图。最后肯定会到位
无非就是时间耗费久点罢了,比你手动忙和省事的多,多挂机 ...

这个实际还是起到了一定的整容效果,可以土式捏脸也很有趣呀,充分满足自己的审美。而且调整图其实不用很多张就能起到一定的效果了,比我预想效果要明显一些。但就是部分图会整体串图,也可能是前后来回实验学习的素材变化太多,导致效果不够统一。
回复 支持 反对

使用道具 举报

0

主题

40

帖子

380

积分

初级丹师

Rank: 3Rank: 3

积分
380
发表于 2022-7-17 17:44:40 | 显示全部楼层
ancientvoice 发表于 2022-7-15 10:48
发现可能是之前用了没有排除眼鼻的素材已经训练到模型里面,所以已经建立了部分角度的训练模型。后面即使排 ...

有空来个局部对比截图看看效果哈
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-9-22 07:41 , Processed in 0.116918 second(s), 10 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表