deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 4490|回复: 44

【自制脚本】过滤相似度较高的src人脸

  [复制链接]

2

主题

22

帖子

1195

积分

初级丹圣

Rank: 8Rank: 8

积分
1195
 楼主| 发表于 2023-1-2 00:10:43 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:5  参与人数:1  我的评分:未评
本帖最后由 lulalahuhaha 于 2023-2-13 22:46 编辑

最近玩DFL的过程中发现了一件非常麻烦的事

我们从视频种提取图片和人脸
有时候人保持一个姿势,会产生大量的近似重复帧
这些重复帧手动删起来非常麻烦,
现有的去重软件基本判不出来
直接按编号2选1又会有大量误删
最后只能用MVE选格子,那效率简直低的令人发指

俗话说,如果重复的操作超过三次,那么程序员就会想办法用代码处理
so,我决定还是自己写个脚本
原理上借助了DFL的直方图排序
可以根据图片的相似程度过滤掉不想要的近似图片
经测试,该脚本的误判率基本在2%以下
如果没有想要保留的特定微表情
这个脚本可以完美的自动解决src重复图过多的问题

放一个小演示
输入相似性阈值(这里默认0.2),等待脚本执行
Snipaste_2023-01-02_00-00-32.png


Snipaste_2023-01-02_00-01-35.png

执行后会产生一个新文件夹,提取后的文件会放在文件夹中
Snipaste_2023-01-02_00-01-57.png

可以看到提取的图片区分度,几乎没有相似的
Snipaste_2023-01-02_00-02-06.png


------------------------------------------------------------------------

脚本前前后后连写带测试花费了两天,大过年的收点辛苦费,需要的自取

-------------------------1.2更新-------------------------------------
修复30系列使用自动退出的问题,下载旧版的小伙伴可以重新下载一下




评分

参与人数 2贡献 +2 收起 理由
marsmana1 + 1 很给力!
ken2099 + 1 很给力!

查看全部评分

回复

使用道具 举报

1

主题

57

帖子

1001

积分

初级丹圣

Rank: 8Rank: 8

积分
1001

万事如意节日勋章开心娱乐节日勋章

发表于 2023-1-2 03:18:23 | 显示全部楼层
感谢楼主发帖,英文原版DFL,3080 laptop显卡无法使用,可能是不适配30系显卡?希望能帮忙调整一下。

[0.2] 请输入相似范围,数值越小,保留的图片越多,建议值[0.1-0.4]:0.2
D:\DeepFaceLab\workspace\data_src\aligned
请按任意键继续. . .

按键即退出
回复 支持 反对

使用道具 举报

2

主题

22

帖子

1195

积分

初级丹圣

Rank: 8Rank: 8

积分
1195
 楼主| 发表于 2023-1-2 03:52:03 | 显示全部楼层
2357a 发表于 2023-1-2 03:18
感谢楼主发帖,英文原版DFL,3080 laptop显卡无法使用,可能是不适配30系显卡?希望能帮忙调整一下。

[0.2 ...

问题已经修复,你重新下载一份
回复 支持 反对

使用道具 举报

1

主题

57

帖子

1001

积分

初级丹圣

Rank: 8Rank: 8

积分
1001

万事如意节日勋章开心娱乐节日勋章

发表于 2023-1-2 11:28:18 | 显示全部楼层
lulalahuhaha 发表于 2023-1-2 03:52
问题已经修复,你重新下载一份

用上了,非常感谢!
回复 支持 反对

使用道具 举报

3

主题

69

帖子

550

积分

高级丹师

Rank: 5Rank: 5

积分
550

万事如意节日勋章

发表于 2023-1-2 12:37:36 | 显示全部楼层
mark下,灵石较少,回来看看评价,先感谢楼主共享出来软件
回复 支持 反对

使用道具 举报

0

主题

14

帖子

172

积分

高级丹童

Rank: 2

积分
172

万事如意节日勋章

发表于 2023-1-2 17:35:31 | 显示全部楼层
mark一下
回复

使用道具 举报

15

主题

66

帖子

1755

积分

初级丹圣

Rank: 8Rank: 8

积分
1755
发表于 2023-1-3 02:19:24 | 显示全部楼层
感谢分享,辛苦了
回复 支持 反对

使用道具 举报

14

主题

127

帖子

6450

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
6450
发表于 2023-1-3 17:53:18 | 显示全部楼层
你这个脚本是不是和论坛发布的差不多? 他有一个 模糊处理,有一个精确处理。我用模糊处理。但是还是有很多角度相似的。  你这个如果有  2万张头像 aligned,能够过滤出多少不要的 头像?
回复 支持 反对

使用道具 举报

2

主题

22

帖子

1195

积分

初级丹圣

Rank: 8Rank: 8

积分
1195
 楼主| 发表于 2023-1-3 19:58:51 | 显示全部楼层
唐门2022 发表于 2023-1-3 17:53
你这个脚本是不是和论坛发布的差不多? 他有一个 模糊处理,有一个精确处理。我用模糊处理。但是还是有很多 ...

你说的是哪个脚本呢,我的脚本筛选范围由你自己设置,你想留下的图片多些就开小点,少些就开大点
回复 支持 反对

使用道具 举报

14

主题

127

帖子

6450

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
6450
发表于 2023-1-3 22:49:19 | 显示全部楼层
lulalahuhaha 发表于 2023-1-3 19:58
你说的是哪个脚本呢,我的脚本筛选范围由你自己设置,你想留下的图片多些就开小点,少些就开大点 ...

已经购买,这个脚本放在文件那个位置才能使用?
回复 支持 反对

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-9-28 01:19 , Processed in 0.103457 second(s), 12 queries , Redis On.

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表