deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 3041|回复: 31

【讨论贴】对坛主的人脸清晰化神器的一点使用体验

[复制链接]

15

主题

1936

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
26084

万事如意节日勋章

 楼主| 发表于 2023-2-7 09:52:22 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:5  参与人数:2  我的评分:未评
本帖最后由 come3002 于 2023-7-29 18:11 编辑

对坛主的人脸清晰化神器的一点使用体验
7.29
分享我的之前没素材时候的4k远景一般临时做法
4k 高码率60fps  陈情令 远景如下图(原版人头像占 3860x2160 人脸高度大约 1/8. )
360截图20230729174524941.jpg

将 视频导出4k ,切脸WF512

00001_0.jpg

人脸切出来了。但是模糊。只能看个大概轮廓
基本无用图片。

现在用坛主人脸清晰化神器。处理一下。
00001_0.jpg

处理后,虽然还是wf512,但 五官清晰,连嘴唇纹理都出来了。

基本可用了

处理前WF512 基本无用,处理后WF512基本可用。
两张图放一起。
360截图20230729173145300.jpg

坛主 清晰化神器 下载
https://dfldata.cc/forum.php?mod ... 6神器
==========================================
7.7 更新赌神 远古素材远景 清晰化测试

远古素材 抖音下载,1080x720.
切脸WF512 发现。人脸小的可怜。模糊的一塌糊涂
360截图20230707014356335.png

左1 人脸清晰化,左2 默认切割的
360截图20230707121219297.png

有了好的人脸,于是就简单了,专丹零训练直接合成,换脸成功。
左1 左2 人脸五官完整,精准匹配。
尤其左1的眉毛是向边缘上翘起来的,跟原版完全不一样。说明换脸成功
并且一些细节比原版 清晰一些


360截图20230707013738067.png
==========================================

很偶然机会来到这个论坛。像打开了一个仙境的大门,里面有个宝库,能学到实现童年梦想的真本身。于是一路潜水看大神的经验贴。
有时会为一个新问题而苦恼,有时又为大神们某些纷争而忧愁,还有的时候因为学到了一点小技巧而高兴很久。
在高手如云。有兢兢业业无私分享的各坛主和管理员。也有经验老道的软件工程师。我啥也不会的新手,从来不敢发主题贴,
最近有一点时间,又开始玩论坛,偶然看到坛主无私分享了一个可以处理老的资源的人脸清晰化神器。我颇为感动。懂得都懂。
有些老资源是少年甚至儿时回忆,模糊但是意义深远,极为难得。我有一套完整资源,可惜换头后鸡肋。一致放硬盘里。

巧了没有看到有专门回帖说这个神器。
于是我马上拿了出来迫不及待的,拿老资源,开始了测试,
我以自己微薄的知识,浅薄鄙陋的见解,生疏的文字。匆忙写下了这篇算不是广泛意义的测评,
更像是自己的新手一点使用体验。供大家参考。



评分

参与人数 1贡献 +1 收起 理由
qdpushaver + 1

查看全部评分

回复

使用道具 举报

67

主题

569

帖子

4243

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
4243
发表于 2023-2-7 11:17:49 | 显示全部楼层
省时间用codeformer,有空的就用remini
回复 支持 1 反对 1

使用道具 举报

15

主题

1936

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
26084

万事如意节日勋章

 楼主| 发表于 2023-2-7 10:08:00 | 显示全部楼层
本帖最后由 come3002 于 2023-2-7 10:33 编辑

后记:
我相信坛主这个时间分享这样神器的工具。不单单是巧合,而是为了论坛更好持续发展,想尽一切办法消除分歧,留着更多的志同道合,一心研究技术,一路实现少年梦想的坛友。
咱们相聚就是缘分,相比去年挥手的人们,我们是幸福的。我们更要珍惜自己好好开心每一天。化复杂事情为灰飞烟灭,对挥手的人们,手捧花开。好好生活。
高手发扬我为人人,人人为我的作风。新手向光而行。多发疑问贴,大神分享高质量的小工具。和和气气交流合作。
一点浅薄的文字耽误大家时间了。谢谢大家。
最后祝愿论坛越办越好。最后祝愿大家 生活开心!天天快乐!
回复 支持 0 反对 1

使用道具 举报

15

主题

1936

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
26084

万事如意节日勋章

 楼主| 发表于 2023-2-7 09:52:23 | 显示全部楼层
测试目的:1;处理前后 对视频是不是真的有提升,标准暂时设定看画质加看齿缝时间快慢。
                 如果使用人脸清晰神器的一组画质更好,出齿缝时间更早说明人脸清晰神器有奇效。
                 2:处理前后,model稳定性测试。标准是调高gan等参数。看那个容易先出现崩溃的痕迹。
                如果未使用人脸清晰神器的一组先有崩溃痕迹,而使用的组很好。说明人脸清晰神器还是避免奔溃model 的小助手。
测试基本过程:
           工具:deepface2.0- 适用于2080;剪映3.05,坛主的人脸清晰化神器。作图注释的用PSCS3
        基本按照deepface一般流程,加坛主教程。因为每个人的素材不同,设置参数不同。所以我的参数可能大家不能使用。特此说明
       基本原则一:单一变量原则。即尽量做到一次只改变一个量。其他相同且一致。
       基本原则二:严谨性原则。真实反馈应该有的样子
       基本原则三:预实验原则。主要针对model稳定性,在真正试验前,多次摸索开gan等大小时间的关系,选择合适参数开始实验。
          但是这样可能影响转换后的相似度。但我依然决定要做。毕竟一个稳定的model更重要。
回复 支持 反对

使用道具 举报

15

主题

1936

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
26084

万事如意节日勋章

 楼主| 发表于 2023-2-7 09:52:24 | 显示全部楼层
本帖最后由 come3002 于 2023-2-7 13:02 编辑

一、人脸清晰化神器安装。软件安装见坛主的贴子,安装此处省略。不能有汉字
二、对准备好的dst 和src 512(100%) 头像 的清晰化处理。为了严谨,老旧资源src选择20年前某电视剧为老资源src,20年前的明星早就没有生图等后续可用资源了。dst则选择了最近2013年普通电视剧视频为目的视频。代表我们的实际情况。我们追看某明星 10年都是少的。。。
软件处理速度极快。这是老旧 src处理前后的比较截图,上半部分是处理前,模糊成渣渣辉了下半部分是处理后的细节明显。堪比重构。
360截图20230206174122602.jpg
三、准备两个文件夹。放入其他条件相等且一致的文件。相同且用同一个起始次数相同model。设定一样参数。注意我开了很高的gan,主要是测定哪种更容易崩溃。

没有两台电脑,只能随机先跑一个。再跑两外一个。从开始跑 ,计时直到看到有要崩溃的停止计时。相同时间跑另一个。 111.jpg
四、合成:相同参数合成,都开颜色 rct,也都开超清60。

五、剪映视频处理,分别采用相同滤镜,使得肤色为自己满意状态。我这个视频太红了,都设为 净透,不开磨皮、不开美白(后面会提到)。这样视频肤色且调整就完成了。
123.jpg
六、视频分析对比。做好视频后。用软件导入两个视频。对齐其起始时间。标注 文字(但是不要放滤镜,因为这是做比对用的)放大逐帧分析两个视频不同记录整理下来。软件还是剪映。
这一部分特别考 一个人的耐心和眼力劲。

145.jpg








回复 支持 反对

使用道具 举报

15

主题

1936

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
26084

万事如意节日勋章

 楼主| 发表于 2023-2-7 09:53:03 | 显示全部楼层
本帖最后由 come3002 于 2023-2-7 13:06 编辑

实验结果:
第一个发现,相同的model,相同的条件相同的时间。在剪映开净透后。20年前老资源未处理,所得的的色泽发黄,同一帧 20年前老资源未处理 牙齿齿缝没有。用20年前老资源经神器 处理后的齿缝很明显。
大家都知道色泽是衡量颜色转移调节的一个指标。齿缝出现快慢是衡量这个model效率高低的重要标准。故而人脸清晰化有助于颜色转移,有助于齿缝快速出现model快速出效果。

如果大家觉得差别不大。请点击图片放大查看。我用剪映 电脑版 差别还是很大的
色泽和齿缝.jpg

回复 支持 反对

使用道具 举报

15

主题

1936

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
26084

万事如意节日勋章

 楼主| 发表于 2023-2-7 09:54:35 | 显示全部楼层
本帖最后由 come3002 于 2023-2-7 13:16 编辑

第二个发现,很多人为了修复模糊的视频可能把gan调节的高一些。或多或少在论坛我就看到了类似帖子。
基于这样的情况。我故意调高gan。看 用神器 修复src再开一样 高 gan是不是不容易崩。

实验如预期。经过人物清晰化 头像后。跑model 即便比较高的 gan 也比模糊的老资料 更稳定不容易崩。
用高gan修复老旧资源而崩过model的人都懂 几十万次数的model没了的感受。。。

如下图所示。在同一帧。20年轻老资源的视频,未修复得到的视频 人物额头,右边头发,乃至右边空白有无数明显的小格子。并有蓝色墨迹
显然因为开了gan要濒临model崩溃;
而20年前老资源 经过坛主人物清晰化得到的新视频。竟然化腐朽为神奇。细心的吧友能看到右侧相同位置相同开高gan也没有一个方格一点蓝色。并没有因为开了高gan要濒临model崩溃,相反,右边拿一束头发几乎根根分明尽享丝滑更清晰。
model wending.jpg
对比明显副本.jpg






回复 支持 反对

使用道具 举报

15

主题

1936

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
26084

万事如意节日勋章

 楼主| 发表于 2023-2-7 10:02:34 | 显示全部楼层
本帖最后由 come3002 于 2023-2-7 10:35 编辑

反思:我的实验还是匆忙,太过简单化。完全可以做的细致一些。
比如测试两个model都崩溃时间比值。比如开齿缝的时间比值。
再比如合成 不开超清又有什么变化。调高超清又如何?
还有色泽在剪映后开净透,两个参数相同,在人像清晰化后为什么更真?dlp自带的为何发黄?如何解释?是普遍现象还是我的个案。

实际上我dlp2.0 2080版本 直接出的视频多次发现肤色问题,比如有容易发黄的现象。是这个版本问题吗
有么有可能dlp2.0自带的颜色迁移还是有待优化的巨大空间?



回复 支持 反对

使用道具 举报

15

主题

1936

帖子

2万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
26084

万事如意节日勋章

 楼主| 发表于 2023-2-7 10:03:48 | 显示全部楼层
本帖最后由 come3002 于 2023-2-7 10:33 编辑

【实验总结】:通过我的不成熟的,设想简单的小测试。从多个角度分析,用了后人脸清晰化神器后,视频清晰度确实高了,肤色色泽也更好,齿缝出的快了。甚至还能还能在一定程度上降低开gan导致的model崩溃,是我们怀旧党的福音啊。
简言之,本小实验首次证明了,坛主公开的 人脸清晰化工具是一款对老旧资源特别友好的神器。
回复 支持 反对

使用道具 举报

0

主题

3

帖子

35

积分

初级丹童

Rank: 1

积分
35
发表于 2023-2-7 10:20:55 | 显示全部楼层
学习了!
回复

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-9-23 06:26 , Processed in 0.097978 second(s), 14 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表