deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 6591|回复: 52

【7.11 更新】迪丽热巴专丹炼制讨论

[复制链接]

15

主题

1921

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
27034

万事如意节日勋章

 楼主| 发表于 2023-7-10 15:48:26 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
本帖最后由 come3002 于 2023-7-11 17:30 编辑

用论坛的6.11 320dfud东方女性底丹尝试炼制迪丽热巴专丹,用的猫之汉化版本,采用的src和dst同样素材对炼,素材来源于论坛
坛友 7.9 也就是昨天发布【迪丽热巴_WF1024】《公诉》4k已遮罩精选10264张。

https://dfldata.cc/forum.php?mod=viewthread&tid=14963&extra=page%3D1
从873220目前迭代2400次,只进到第一步,开了 梯度剪裁,学习率,损失率在0.19和0.20。
目前该为 开了 、眼嘴和侧脸,梯度剪裁 开启学习率炼习,损失率,一会才出loss。

逐步更新炼制迭代和预览图,大家讨论下如何将此丹炼制更清晰,好的建议提供者,将免费提供专丹。

开始的迭代 2200迭代变化,
损失率在0.19和0.20。(今天没开远程炼丹,用3050 笔记本慢慢跑
360截图20230710152942627.jpg

目前改为 开了  眼嘴和侧脸,梯度剪裁 开启学习率炼习;但损失率,一会才出loss。

360截图20230710153724017.jpg
360截图20230710153708724.jpg

对炼13w迭代(也就是累计100w训练).开始测试。


以下测试全部切WF1536.零训练直接合成。
A 6.11高质量底丹                                                    累计87w
A 6.11高质量87转 迪丽热巴专丹13w bs4 对炼而成。  累计100w。
B  坛主底丹转林允儿         未知                                累计500w。
C 自闭2.0 转李一桐          201w,gan30w                  累计未知。
D 坛主底丹转江疏影            未知                             未知                       
4K近景 国产60fps 电视剧 测试

左1 6.11 高质量 左2 林允儿 左3 高质量转迪丽热巴
左1底丹和左3 迪丽热巴专丹在牙齿 等细节有巨大不同。
说明换脸成功。但是清晰度保存了下来。

6.11高质量 底丹 林允儿224liae512 迪丽热巴对比.jpg

左1 江疏影专丹 左2 李一桐  左3 迪丽热巴

李一桐能看到2个明显很大黑痣,隐约的下牙齿。嘴唇纹理也很棒。
迪丽热巴能看到右眼下的黑痣,隐约的下牙齿
6.11高质量 迪丽热巴 江疏影224liae512 李一桐自闭2.0.jpg

左1 原版,左2 林允儿 左3 迪丽热巴
光影,迪丽热巴跟原版更接近。
细节方面
林允儿 右腮出现微微虚影。脸色发黄
迪丽热巴能看到右眼下的黑痣,隐约的下牙齿
6.11高质量 林允儿224liae 迪丽热巴100w 原版对比.jpg
结论:13w的迪丽热巴(累计 100w ) 已经换脸成功,有了自己的特征(右眼下黑痣,下牙齿齿缝),
同时又保留了底丹的清晰度。也没用虚影。


4K樱花国 虚影测试
很多人换脸就是冲着樱花国去的。但是抖动,虚影影响感观。
以下测试全部切WF1536.零训练直接合成。开相同W、E\T
上1 迪丽热巴
下1 林允儿
林允儿出现了虚影(不规则状,具体的说是下巴和颧骨明显,右腮则弱,)。
迪丽热巴无 明显虚影。
6.11 高质量 迪丽热巴 虚影 林允儿224liae 512 虚影对比.jpg

上2 迪丽热巴 6.11高质量炼制
下2 李一桐 自闭2.0.  
李一桐出现了虚影(不规则,主要是下巴出,右腮和颧骨则弱)
6.11高质量 迪丽热巴 李一桐 自闭2.0 虚影.jpg

我有多套4k樱花国60fps 测试DST(
不同女性)。有些图无法上传。但是一直在做测试。结果与之相同。
结论:13w的迪丽热巴(累计 100w ) 已经换脸成功,
并对樱花国虚影有一定的改善。














评分

参与人数 2贡献 +2 收起 理由
dhh520 + 1
bbking2018 + 1 十分给力!

查看全部评分

回复

使用道具 举报

42

主题

274

帖子

4101

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4101
发表于 2023-7-27 09:50:04 | 显示全部楼层
seancai110 发表于 2023-7-10 16:24
炼得快,没有dst污染。
大家都懒,要是每换一个dst视频就要用dst训练一次,那也太麻烦了。还是练好一个专 ...

那我 一开始练专丹的时候,就是已经找了一个很多迭代的底丹了,还要拿我想换的人的src对着各种各样的dst训练一下吗?
回复 支持 0 反对 1

使用道具 举报

15

主题

1921

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
27034

万事如意节日勋章

 楼主| 发表于 2023-7-10 16:01:57 | 显示全部楼层
本帖最后由 come3002 于 2023-7-10 16:46 编辑

开 口眼、侧脸、开启学习率,梯度裁剪等。
累计875961
loss出来了。
loss 0.3668。
这一步只是测试数据用。
相当于预实验。

(笔记本太慢,暂停下。找远程中)

360截图20230710160033440.jpg




回复 支持 反对

使用道具 举报

11

主题

123

帖子

1664

积分

初级丹圣

Rank: 8Rank: 8

积分
1664

万事如意节日勋章

发表于 2023-7-10 16:02:03 | 显示全部楼层
开了梯度裁剪和学习率,2400就降到0.19和0.20,也太快了吧?
回复 支持 反对

使用道具 举报

0

主题

75

帖子

522

积分

禁止访问

积分
522
发表于 2023-7-10 16:02:57 | 显示全部楼层
提示: 作者被禁止或删除 内容自动屏蔽
回复 支持 反对

使用道具 举报

7

主题

100

帖子

797

积分

高级丹师

Rank: 5Rank: 5

积分
797
发表于 2023-7-10 16:13:10 | 显示全部楼层
n642042838 发表于 2023-7-10 16:02
胆子大,不怕炸!

bs2炸个锤子,开爆都不会炸
回复 支持 反对

使用道具 举报

15

主题

1921

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
27034

万事如意节日勋章

 楼主| 发表于 2023-7-10 16:15:38 | 显示全部楼层
n642042838 发表于 2023-7-10 16:02
胆子大,不怕炸!


这套WF1024 大约3G
1111.jpg
回复 支持 反对

使用道具 举报

15

主题

1921

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
27034

万事如意节日勋章

 楼主| 发表于 2023-7-10 16:17:46 | 显示全部楼层
kn66666 发表于 2023-7-10 16:13
bs2炸个锤子,开爆都不会炸

最近我的古力丹跑的差不多了。刚把远程结算了。
今天用自己笔记本 3050 跑就是为了测试这个底丹 跑迪丽热巴 loss降的速度。
平时我都是换 远程跑的。

回复 支持 反对

使用道具 举报

5

主题

64

帖子

2853

积分

初级丹圣

Rank: 8Rank: 8

积分
2853
发表于 2023-7-10 16:19:39 | 显示全部楼层
采用的src和dst同样素材对炼 有啥意义?
回复 支持 反对

使用道具 举报

11

主题

123

帖子

1664

积分

初级丹圣

Rank: 8Rank: 8

积分
1664

万事如意节日勋章

发表于 2023-7-10 16:19:59 | 显示全部楼层
come3002 发表于 2023-7-10 16:01
开 口眼、侧脸、开启学习率,梯度裁剪等。
累计875961
loss出来了。

直接开眼嘴、侧脸和学习率?不先跑下眼嘴、侧脸等loss值下降后再开学习率跑?
回复 支持 反对

使用道具 举报

13

主题

1049

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
12750
发表于 2023-7-10 16:24:18 | 显示全部楼层
cycy 发表于 2023-7-10 16:19
采用的src和dst同样素材对炼 有啥意义?

炼得快,没有dst污染。
大家都懒,要是每换一个dst视频就要用dst训练一次,那也太麻烦了。还是练好一个专丹之后,直接合成方便。

当然,对练是炼专丹的最后一步。前面炼底丹的时候,已经把各种各样的人脸信息训练学习了。
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-11-28 04:15 , Processed in 0.150864 second(s), 43 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表