. : : ClassiClub ForuM : : .

会员中心 论坛帮助 日历事件 标记论坛已读
返回   精品技术论坛 » 技术论坛 » 『软件使用』

『软件使用』: 电脑软件推荐, 电脑软件使用, 经验分享



发表新主题 回复
 
主题工具
foxme
 
foxme 的头像
核心会员
 
资 料:
注册日期: Mar 2001
帖子: 3,794 声望值: 3
精华: 0,解答: 26
#1 旧 2012-12-04, 01:17:50 默认 【分享】寻找可以查找重复图片的工具:结论篇
foxme 当前离线  

本文已经结束, 谢谢参与的朋友.
这个帖子不是分享贴, 所以主要的目的还是和大家讨论最好的图片重复查找工具. 目前已经进入分享贴的进度.

如果你还有压箱底的重复图排查工具, 回复本贴, 至少要提供软件名称(和版本号)以及官方网站的地址. 非常感谢.
如果你只是来索取分享结果, 请订阅本帖, 会在锁贴之前不定期的更新. 你会获得最新的更新信息.


正文开始

由于我的工作经常要和图片打交道, 硬盘中不免充斥着非常多的重复图片, 有时候来源不同, 但是其实图片相同的情况也频频出现. 所以很早前我就动了使用工具进行排查重复图片的想法, 慢慢的做了一些积攒, 现在罗列比较一下.


首先, 普通的查找重复工具为什么不能胜任?

比如doubleKiller就是一个非常好的工具, 可是对于图片来讲, 他只能找完全一样(包括尺寸, 大小等), 但是重复图片查找还有更高难度的需求, 就是
* 同一个图片, 但是不同缩放尺寸
* 同一个图片, 但是不同转向
* 同一个图片, 但是不同的颜色(比如灰度图, cmyk, rgb等)
* 同一个图片, 但是不同的图片格式.
而以上的这些区别对于像doublekiller这样的通用重复查找工具来说, 是无法识别的. 所以专业的针对图像的识别重复工具就显得很有必要了.

准备工作, 我准备了一个文件夹, 里面放置了一些图片
----* 将其中一些转存了不同的格式(jpg, gif, png, psd, tif)------
* 并且使用工具将他们的一些做了各种形式的反转
* 还另存了放大和缩小版本
* 并将几个图片做了不同颜色的改变
* 甚至剪裁过一部分


下载样本文件, 第4版:
链接: https://pan.baidu.com/s/1c2cN9WO 密码: 1kmc


推荐的软件
在本节后有结语, 请查看.
-----------------------------------------------
引用:
AntiDupl完全免费的神器!
删除了19个重复图片
剩下的图: 裁切0%识别. 尝试了其他容差率, 都一样.
+++++++++++++++++++++++++++++++++++++
我尝试了搜索一个我的照片文件夹, 其中有10574个照片
用此工具搜索比对仅仅用了5分钟, cpu占用很大达到80%, 但是你可以选择使用background模式.
结果搜索出来704张重复图片, 这个软件自行定义删除标记, 他会保留最大的尺寸等.
清除完成后, 节省空间200多M.
这只是我的手机照片目录, 哈, 还不包括一些素材.
+++++++++++++++++++++++++++++++++++++
引用:
Image Comparer 这个是个收费软件, 免费试用后
删除了11幅重复图片
剩下的图: 旋转图识别0%, 灰度图50%识别, 裁切0%识别.
引用:
ImageDupeless这个是个收费软件, 免费试用后
在容差11%的默认值下, 删除了12幅重复图片
剩下的图: 旋转图识别0%, 裁切0%识别
如果将容差调整到18%, 裁切图被识别.
引用:
Awesome Duplicate Photo Finder 这个是个免费软件, 还有portable版
删除了11幅重复图片
剩下的图:旋转图识别0%, 格式剩了一个(不支持psd), 裁切无法识别.
另外延伸阅读, 这个网站还有很多其他专项搜索重复文件的工具, 大家可以尝试.
引用:
SimilarImages免费的工具, 能够调整相似度, 而且有一些针对执行效率的设置
我使用的是stable版(beta版朋友们自行测试), 在默认的35等级的标准下, 删除了11个重复图.
剩下的图: 旋转图识别0%, 格式剩了一个(bmp), 裁切0%识别
尝试了其他的等级设置, 没有更多的改进.
引用:
VisiPics免费工具
在basic模式下, 删除了9个图片
剩下的图: 旋转图识别率0%, 灰度图识别0%, 格式剩了一个(psd), 裁切识别0%.
在loose模式下, 增加删除了灰度图, 识别100%.
引用:
ylkk 推荐 FirmTools Duplicate Photo Finder 收费工具, 免费试用版试用结果:
首先, 要在设置中把小图忽略取消. 确保你选择了旋转图识别.
删除了16组图片,
剩下的:, psd图片一个, png图2个, 裁切图识别0%
尝试将设置中的相似匹配换了各种等级的数值, 结果没有变化.
引用:
Dup Detector免费的工具, 界面有些粗陋
相似度在95%以上, 删除了10个图片
剩下的是: 旋转图识别0%, 裁切识别0%, 灰度图识别50%, 格式图gif不支持
尝试90%的相似度, 并且在设置中选择了检查镜像图, 删除了13个图片
剩下的是: 旋转图识别14%(删除了镜像翻转图), 格式gif不支持
这个软件有一些比较细致的设置, 大家可以尝试调整一下.
引用:
ZeNiX 18楼推荐, DuplicatesFinder (内含下载),
删除了10个图片,
未删除的包括: 旋转识别0%, 尺寸保留了一个(可能自动忽略小图, 未有设置), 不支持gif格式, 裁切图识别0%.

结语
目前没有一个软件是可以涵盖所有功能的, 所以交叉使用达到完美效果是目前的处境.
对于清楚重复图片的流程是:
1, doublekiller, 这个找出完全一样的图片(如果你确定没有复制图, 这部可以省略)
2, AntiDupl, 找到几乎所有的重复图片, 除了裁切图.
3, ImageDupeless/Dup Detector, 将容差调整的大一些, 然后可以删除裁切图.


一些特例的处理

引用:
如果大家是整理自己拍摄的图片, 确定这些图片都包含元数据(meta), 其中应该都会有拍摄的时间(yy-mm-dd, hh:mm:ss), 那么可以有一个相对简单而且有效的方法.
首先使用软件"namexif", 将所有的图片命名为时间格式, 然后只需要对比完全一样的文件名称的图片即可. 因为理论上不可能在同一秒钟拍摄同样的照片.
引用:
同样的, namejm提供的 【原创】批处理版的照片整理器 也是在上面这个思路下非常高效的工具, 还有一些自动分类之类的额外功能.





待查证效果的软件
------------------------------------------------
引用:
acdsee的查找重复插件, 我用的是acdsee5的, 似乎一张都没有找到. 有点儿意外, 等待其他版本的确认.
引用:
这里提到可以使用snagit, 但是我尝试了snagit 比较新的版本, 找不到这个功能, 请有空儿的朋友帮忙测试一下?
引用:
根据dred推荐, cPicture我在xp下无法运行. 请有条件的朋友测试一下
引用:
ImageDupe这个是收费的, 我稍后再说
引用:
IMatch 3这是在一个adobe论坛里面看到介绍的. 收费软件, 有30天全功能试用版. 搜索类似图片只是其中的一个功能之一, 效果不错, 但是他并不是告诉你有几个重复图, 而是让你挨个看每幅图片都有几个类似的图片. 这个方式很聪明, 但是对于大量的图片不知道会不会审视起来太累呢?
引用:
PictureRelate 这是一个很不错的浏览工具, 试用14天, 不免费. 他是根据图片的相似度来进行浏览的. 比如都是蓝色的图片, 或者都是树的图片, 如果设置的好, 也是可以找到相同的图片的.

线索未查证
有条件的朋友请帮忙检查一下效果.
Duplicate Photo Search in Elements Organizer 10我不知道adobe都在做什么, 但是为了实现这么个功能要安装2g左右的软件, 对我来讲太夸张了, 希望我重复的图片没有2g这么多. 如果哪位朋友刚好有这个软件安装了, 请帮忙测试一下样本文件.看看他的表现如何.
Deleting your duplicate photos using Picasa - YouTube



无用的软件
-------------------------------------------------
引用:
首先先用doubleKiller试试, 结果是没有重复. 不出所料
引用:
imgSweeper搜索到bmp图片反转一组.软件是绿色的.
引用:
softworm多次推荐的工具d`peg!这个找到了7组重复图片, 包括颜色变化, 尺寸缩放, 和横竖翻转(但是不能找到90度旋转类的.界面实在有些非主流!
引用:
Duplicate images finder这个软件不是很稳定, 但是毕竟也是找到了2组重复的图片, 但是无法删除.
引用:
Duplicate File Finder收费软件, 免费有试用版本.仅仅找到了一组翻转图.









weibo.com/2anyone

此帖于 2017-03-15 00:16:18 被 foxme 编辑. .
回复时引用此帖
aqaz
 
aqaz 的头像
支柱会员
 
资 料:
注册日期: Dec 2001
帖子: 4,093 声望值: 3
精华: 0,解答: 6
#2 旧 2012-12-04, 19:41:29 默认
aqaz 当前离线  

d'peg会不会是搜索选项没设对,印象中是可以搜的。很久前用过。好像是根据色彩分析来搜,红绿蓝比例?这样的话颠倒旋转都应该没关系。


从善如流
回复时引用此帖
foxme
 
foxme 的头像
核心会员
 
资 料:
注册日期: Mar 2001
帖子: 3,794 声望值: 3
精华: 0,解答: 26
#3 旧 2012-12-04, 23:40:04 默认
foxme 当前离线  

引用:
作者: aqaz 查看帖子
d'peg会不会是搜索选项没设对,印象中是可以搜的。很久前用过。好像是根据色彩分析来搜,红绿蓝比例?这样的话颠倒旋转都应该没关系。
如果方便的话, 请下载样本文件, 然后使用d'peg试试. 看看会不会有更好的结果?
回复时引用此帖
sheheng
 
sheheng 的头像
热心会员
 
资 料:
注册日期: Jan 2001
帖子: 3,228 声望值: 5
精华: 0,解答: 7
#4 旧 2012-12-05, 11:26:27 默认
sheheng 当前离线  

向来用acdsee的插件寻找重复图片,好使。


男人是牛,女人是地;牛越耕越瘦,地越耕越熟;只有累死的牛,没有耕坏的地。毕竟,好火费炭,好女废汉,好车费油,好菜费饭,以及好房费钱,都是一个道理。
回复时引用此帖
天凤凰
 
天凤凰 的头像
超级会员
 
资 料:
注册日期: May 2002
帖子: 1,129 声望值: 3
精华: 0,解答: 2
#5 旧 2012-12-05, 13:03:15 默认
天凤凰 当前离线  

Duplicate Photo Finder 1.1.0.148,请试一试这个。


Steering my ship with hope,leave fear behind
回复时引用此帖
allcorpse
 
allcorpse 的头像
热心会员
 
资 料:
注册日期: Oct 2001
帖子: 2,802 声望值: 6
精华: 0
#6 旧 2012-12-05, 14:03:29 默认
allcorpse 当前离线  

引用:
作者: sheheng 查看帖子
向来用acdsee的插件寻找重复图片,好使。
什么版本的acdsee和什么插件呀?


心无所归,身在何处。 PS:nick AC
长春坛友QQ群:82927655,PM先!
回复时引用此帖
sheheng
 
sheheng 的头像
热心会员
 
资 料:
注册日期: Jan 2001
帖子: 3,228 声望值: 5
精华: 0,解答: 7
#7 旧 2012-12-05, 14:46:20 默认
sheheng 当前离线  

引用:
作者: allcorpse 查看帖子
什么版本的acdsee和什么插件呀?
仔细看了楼主的要求,估计AcdSee完成不了~

只能查找相同大小的重复图片。。。

此帖于 2012-12-05 14:49:23 被 sheheng 编辑. .
回复时引用此帖
weifeng
 
weifeng 的头像
终极会员
 
资 料:
注册日期: Dec 2001
帖子: 8,997 声望值: 3
精华: 2,解答: 13
#8 旧 2012-12-05, 14:50:40 默认
weifeng 当前离线  

引用:
作者: 天凤凰 查看帖子
Duplicate Photo Finder 1.1.0.148,请试一试这个。
同推荐这个。
回复时引用此帖
foxme
 
foxme 的头像
核心会员
 
资 料:
注册日期: Mar 2001
帖子: 3,794 声望值: 3
精华: 0,解答: 26
#9 旧 2012-12-05, 18:27:03 默认
foxme 当前离线  

引用:
作者: sheheng 查看帖子
向来用acdsee的插件寻找重复图片,好使。
烦请下载样本图片试试, 看看能找出几组?

我的感觉是acdsee的重复图片是和重复文件一个道理.
回复时引用此帖
foxme
 
foxme 的头像
核心会员
 
资 料:
注册日期: Mar 2001
帖子: 3,794 声望值: 3
精华: 0,解答: 26
#10 旧 2012-12-05, 18:38:01 默认
foxme 当前离线  

引用:
作者: 天凤凰 查看帖子
Duplicate Photo Finder 1.1.0.148,请试一试这个。
如果您指的是Awesome Duplicate Photo Finder, 我已经测试过了, 而且标记了绿色. 是很不错的免费工具.

如果不是这个软件, 请告诉我网址, 我好去下载测试.

非常感谢.
回复时引用此帖
ZeNiX
 
ZeNiX 的头像
中级会员
 
资 料:
注册日期: Jan 2012
帖子: 478 声望值: 3
精华: 0,解答: 6
#11 旧 2012-12-06, 11:41:07 默认
ZeNiX 当前离线  

Advanced Duplicates Finder, 我电脑上的是很古老的版本 1.5 (2008 年下载的)
找到 9 组,19张图片。

对于旋转的,完全没找到。
回复时引用此帖
ylkk
 
ylkk 的头像
支柱会员
 
资 料:
注册日期: Jan 2002
帖子: 5,368 声望值: 3
精华: 1,解答: 9
#12 旧 2012-12-06, 17:16:01 默认
ylkk 当前离线  

FirmTools Duplicate Photo Finder 找出14组,包括5组复制,6组旋转


不知道你来自于哪里 所有呼吸着的都是你的兄弟 你的双脚带着泥土 最终你和大地合而为一
回复时引用此帖
ASL
 
ASL 的头像
超级会员
 
资 料:
注册日期: Feb 2011
帖子: 1,588 声望值: 2
精华: 0,解答: 8
#13 旧 2012-12-06, 18:24:38 Icon16
ASL 当前离线  

引用:
作者: foxme 查看帖子
烦请下载样本图片试试, 看看能找出几组?

我的感觉是acdsee的重复图片是和重复文件一个道理.
确实如此,本人目前也用的是ACDSee 5,那查找真的不咋的。很多软件就喜欢打包一堆平庸的东西,什么FTP、Email、刻录等等功能,很反感。

感觉基本上就是靠MD5之类的判断下,真是没啥技术含量。

PS:ACDSee的强制编辑备份,真是一坨S
回复时引用此帖
foxme
 
foxme 的头像
核心会员
 
资 料:
注册日期: Mar 2001
帖子: 3,794 声望值: 3
精华: 0,解答: 26
#14 旧 2012-12-09, 18:47:44 默认
foxme 当前离线  

引用:
作者: ZeNiX 查看帖子
Advanced Duplicates Finder, 我电脑上的是很古老的版本 1.5 (2008 年下载的)
找到 9 组,19张图片。

对于旋转的,完全没找到。
烦请可否将您的这个版本分享给我们? 谢谢.
回复时引用此帖
foxme
 
foxme 的头像
核心会员
 
资 料:
注册日期: Mar 2001
帖子: 3,794 声望值: 3
精华: 0,解答: 26
#15 旧 2012-12-09, 22:15:07 默认
foxme 当前离线  

引用:
作者: ylkk 查看帖子
FirmTools Duplicate Photo Finder 找出14组,包括5组复制,6组旋转
非常感谢你的推荐.

此帖于 2012-12-10 16:18:16 被 foxme 编辑. .
回复时引用此帖
发表新主题 回复

主题工具

论坛规则  发帖规则
不可以发表主题
不可以回复帖子
不可以上传附件
不可以编辑自己的帖子
论坛启用 vB 代码
版面启用 表情符号
版面启用 [IMG] 代码
版面禁用 HTML 代码


所有时间均为北京时间, 现在的时间是 01:19:21.

本论坛带宽由迅通网络提供
SSL证书由TrustAsia提供

Copyright © 2000 - 2019 ClassiClub Forum All Rights Reserved.
粤ICP备09123456号