deepfacelab中文网

 找回密码
 立即注册(仅限QQ邮箱)
查看: 5159|回复: 33

【图片去重】可能是目前论坛里最好用的独立去重软件

  [复制链接]

6

主题

418

帖子

1万

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
15665
 楼主| 发表于 2022-12-6 12:19:10 | 显示全部楼层 |阅读模式
星级打分
  • 1
  • 2
  • 3
  • 4
  • 5
平均分:NAN  参与人数:0  我的评分:未评
本帖最后由 酷妞儿 于 2022-12-13 11:26 编辑

这可能是目前论坛里最好用的独立去重软件了。

我们都知道过多重复的SRC会占用太多资源,拉低训练效率,尤其是我们配置一般的机器更明显。
当你面对成千上万拿着显微镜都找不出任何不同的图片时,手动删除是不可能完成的任务。



在论坛下载了很多图片去重软件、插件,感觉用起来各有各的问题:
有的操作逻辑有问题,重复图片需要一个一个删除;有的没有完全汉化,有的选项不明白是什么意思;有的搜索选项可选择性很少;有的干脆不能选择,直接用其预设的逻辑简单粗暴的砍去相似内容,造成误删。。。



直到我发现了这款软件,完美解决了我认为的痛点:


1、完全自定义去重规则,根据不同的数据集采取不同的去重策略。
1.PNG

2、完全自定义扫描路径,可以在不同的文件地址之间对比去重,也可以扫描同一个路径下所有的子文件夹。
2.PNG
3、不仅可以扫描图片,还可以扫描常规文件,视频、音频文件。

4、所有扫描结果一目了然,根据相似程度分成不同的组,直观删除或保留。
这是我认为最牛逼的功能,配合选择恰当的扫描规则,你可以在尽最大可能保留微表情的前提下删除最多的重复图片。
4.PNG
5、当然你也可以通过选择助手,自定义选择规则自动删除保留。

6、完全汉化,没有难以理解的选项文字。
3.PNG
发现这么超级棒的软件,肥肠激动地分享给大家。
还有很多好处没写出来,大家自己去发现吧,真的好用。


链接检测插件已不起作用,直接看这边:
测试链接:https://pan.baidu.com/s/1vr7D77zDLO0ydaxbIXKvXA






回复

使用道具 举报

1

主题

68

帖子

3215

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
3215
发表于 2023-1-4 09:12:59 | 显示全部楼层
感谢分享,看起来不错
回复 支持 1 反对 0

使用道具 举报

4

主题

54

帖子

718

积分

高级丹师

Rank: 5Rank: 5

积分
718
发表于 2022-12-6 15:11:54 | 显示全部楼层
来试试看~~
回复

使用道具 举报

1

主题

861

帖子

5990

积分

高级丹圣

Rank: 13Rank: 13Rank: 13Rank: 13

积分
5990

万事如意节日勋章

发表于 2022-12-6 15:30:34 | 显示全部楼层
谢谢兄弟的分享~
回复 支持 反对

使用道具 举报

7

主题

181

帖子

995

积分

高级丹师

Rank: 5Rank: 5

积分
995
发表于 2022-12-6 16:19:40 | 显示全部楼层
感谢分享,看起来功能很强大
回复 支持 反对

使用道具 举报

0

主题

7

帖子

231

积分

初级丹师

Rank: 3Rank: 3

积分
231
发表于 2022-12-6 23:47:29 | 显示全部楼层
感谢分享~
回复

使用道具 举报

4

主题

173

帖子

975

积分

高级丹师

Rank: 5Rank: 5

积分
975
发表于 2022-12-7 14:31:06 | 显示全部楼层
这是个好东西
回复 支持 反对

使用道具 举报

0

主题

66

帖子

1024

积分

初级丹圣

Rank: 8Rank: 8

积分
1024
发表于 2022-12-7 14:40:59 | 显示全部楼层
马一下,感谢楼主分享!
回复 支持 反对

使用道具 举报

0

主题

9

帖子

87

积分

高级丹童

Rank: 2

积分
87
发表于 2022-12-7 22:34:27 | 显示全部楼层
感谢分享
回复

使用道具 举报

3

主题

100

帖子

2717

积分

初级丹圣

Rank: 8Rank: 8

积分
2717

万事如意节日勋章

发表于 2022-12-8 23:58:25 | 显示全部楼层
先试试看
回复

使用道具 举报

QQ|Archiver|手机版|deepfacelab中文网 |网站地图

GMT+8, 2024-11-25 09:56 , Processed in 0.146688 second(s), 44 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表