deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
楼主: avtopalang

请教!开GAN以后,再开随机扭曲,原来用GAN的细节还在吗?

[复制链接]

41

主题

741

帖子

5337

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
5337

万事如意节日勋章开心娱乐节日勋章

发表于 2023-11-24 06:29:01 | 显示全部楼层
本帖最后由 WaveBedo 于 2023-11-24 06:35 编辑
wtxx8888 发表于 2023-11-23 22:11
再补充一句,大佬基本都是迭代到底,而不是去开GAN,毕竟结果就跟你这帖子发的初衷一样,关扭曲开GAN会向DS ...
要么咬牙扭曲迭代到细节满意为止(通常为扭曲状态LOSS在0.2及以下)
-------------------------------------------------------------------------
扭曲迭代到细节满意为止”,你说的是liae吧?
df开true face之前不是应该关闭扭曲吗
回复 支持 反对

使用道具 举报

14

主题

2939

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
15926

真我风采勋章万事如意节日勋章

发表于 2023-11-24 10:35:52 | 显示全部楼层
本帖最后由 wtxx8888 于 2023-11-24 10:59 编辑
WaveBedo 发表于 2023-11-24 06:29
要么咬牙扭曲迭代到细节满意为止(通常为扭曲状态LOSS在0.2及以下)
------------------------------------- ...

真脸?真脸也属于扭曲,是SRC直接置换,与DST结合最差,所以开真脸不是必须关扭曲的,可以同时开。
LIAE是DST向SRC扭曲,所以结合跟光影好,毕竟是特么的DST变出来的,但与SRC相似度就差了。
DF是SRC向DST扭曲,SRC的底,必然与DST结合不好,但像SRC。
回复 支持 反对

使用道具 举报

4

主题

93

帖子

637

积分

高级丹师

Rank: 5Rank: 5

积分
637
发表于 2023-11-24 13:37:26 | 显示全部楼层
wtxx8888 发表于 2023-11-24 00:03
一般预训练丹复用开嘴眼与扭曲,会快速下降到0.4-0.6附近,如果碰巧你的SRC人物被练过会更低,剩下的就靠 ...

请问开扭曲BS也是开越大越好吗?因为很多教程都说小BS勾勒轮廓,大BS描绘细节,所以一般一开始开扭曲BS只开4。那如果扭曲一开开到底是不是要把BS拉高?
回复 支持 反对

使用道具 举报

13

主题

527

帖子

3792

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3792
发表于 2023-11-24 16:13:18 | 显示全部楼层
本帖最后由 若苗瞬 于 2023-11-24 16:14 编辑

LZ你看还有另一个参数(学习率丢弃):
Use learning rate dropout ( n / y / cpu )

Tooltip: When the face is trained enough, you can enable this option to get extra sharpness and reduce subpixel shake for less amount of iterations.
Enabled it before disable random warp and before GAN.
n – disabled.
y – enabled
cpu – enabled on CPU. This allows not to use extra VRAM, sacrificing 20% time of iteration.

它需要在:开GAN 之前。
同时需要:关随机扭曲 之后。

参考这个,时间顺序的逻辑关系就很明确了。

回复 支持 反对

使用道具 举报

14

主题

2939

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
15926

真我风采勋章万事如意节日勋章

发表于 2023-11-24 16:37:19 | 显示全部楼层
459717439 发表于 2023-11-24 13:37
请问开扭曲BS也是开越大越好吗?因为很多教程都说小BS勾勒轮廓,大BS描绘细节,所以一般一开始开扭曲BS只 ...

小BS指的是快速成像轮廓,扭曲跟这个无关,大BS小BS只是会影响扭曲速度的快慢罢了
回复 支持 反对

使用道具 举报

3

主题

50

帖子

921

积分

高级丹师

Rank: 5Rank: 5

积分
921
 楼主| 发表于 2023-11-24 16:52:47 | 显示全部楼层
wtxx8888 发表于 2023-11-23 21:39
首先呢,LOSS下降看的是硬件,大佬还是很多的,甚至某些都是专业级的硬件,LOSS到0.1下很难?别用家用玩玩 ...

亲自实验结果

未标题-1.jpg
回复 支持 反对

使用道具 举报

3

主题

50

帖子

921

积分

高级丹师

Rank: 5Rank: 5

积分
921
 楼主| 发表于 2023-11-24 16:55:38 | 显示全部楼层

上传图片有点模糊,实际效果更加明显。另外,一个很严重的问题,如果一直开扭曲到底,眼神是不对的,扭曲不到眼神,可以看下图片的眼珠位置。
回复 支持 反对

使用道具 举报

14

主题

2939

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
15926

真我风采勋章万事如意节日勋章

发表于 2023-11-24 17:04:06 | 显示全部楼层
本帖最后由 wtxx8888 于 2023-11-24 17:06 编辑

推荐你用个唱歌视频做实验,扭曲一直开启,看看成视频时播放,口型是否对的上,不就知道扭曲是否可以开到底?
回复 支持 反对

使用道具 举报

13

主题

128

帖子

1483

积分

初级丹圣

Rank: 8Rank: 8

积分
1483
发表于 2023-11-24 18:00:26 | 显示全部楼层
wtxx8888 发表于 2023-11-23 20:02
开扭曲学不到细节?很明确的告诉你,那是你迭代数差了十万八千里的缘故,开扭曲是可以练到肉眼下,与SRC一 ...

不是说LOSS 很低的时候还开着扭曲,显卡是在磨洋工摸鱼吗?
回复 支持 反对

使用道具 举报

41

主题

741

帖子

5337

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
5337

万事如意节日勋章开心娱乐节日勋章

发表于 2023-11-24 18:05:27 | 显示全部楼层
wtxx8888 发表于 2023-11-24 10:35
真脸?真脸也属于扭曲,是SRC直接置换,与DST结合最差,所以开真脸不是必须关扭曲的,可以同时开。
LIAE是 ...

捕获0016.PNG


所以,为了与dst结合好,以及不影响与src的相似度,
你的建议是,既不要开真脸,也不要开gan,是吧?

上面第三张图,鼻子的位置显示的是眼睛,你觉得是由于开gan造成的吗?
我的landmark都是检查过的,出问题的几率比较少

回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-11-21 19:19 , Processed in 0.129966 second(s), 34 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表