M1NG 发表于 2024-2-6 20:10

【已解决】有什么办法可以检查大量图像之中的重复项？

本帖最后由 M1NG 于 2024-2-6 23:53 编辑

因为平时总是会随手存一些图，又没有分类的习惯，所以日积月累了非常多的图，总量得有3万多张；而且问题在于有时候为了规避水印，有的图我可能是以截图的方式存下来的，同一个图也可能在别的平台原生存下来的，所以导致相同的一个图可能大小并不一致。

现在希望能先简单把里面的重复项去重一下；所以，请教一下各位PC端有没有一个现成方案能够把这一些图像（主要就是PNG和JPG）两两进行比对，挑出里面的重复的两项或多项展示文件名或者能够直接操作这些文件，类似苹果或者某些手机图像管理软件里的那种“相似图像”功能那种。如果没有，有什么比较简单的代码能实现的话我也能探索探索。

schneehertz 发表于 2024-2-6 20:43

dupeGuru

gx19860411 发表于 2024-2-6 21:27

photoduplicate
搭车求个同样逻辑对比视频的工具

—— 来自 Xiaomi M2011K2C, Android 13上的 S1Next-鹅版 v2.5.4

hecas 发表于 2024-2-6 22:19

M1NG 发表于 2024-2-6 22:32

hecas 发表于 2024-2-6 22:19
可不可以算出文件的md5
然后粘贴到excel里面筛选重复


应该不行，主要是有的是截图的，有可能一张图两次截的大小不太一样，得要专门的识别算法才行估计

ulysses 发表于 2024-2-6 23:30

duplicate cleaner

yvev 发表于 2024-2-6 23:40

czkwaka

yvev 发表于 2024-2-6 23:40

风怒

zyhang 发表于 2024-2-7 00:34

代码的话，可以用一个图像搜索的模型，将图像映射到d维空间上，然后比较映射之间的欧氏距离或余弦距离

随便搜了一下，比如说用https://github.com/TechyNilesh/DeepImageSearch这个库，应该也不是很麻烦，写几行Python代码大概

谎称 发表于 2024-2-7 11:54

AntiDupl.NET

yuzhao1985 发表于 2024-2-8 11:28

插个眼，也有类似的需求

配装车间 发表于 2024-2-8 18:18

所以楼主的解决方案是什么
页: [1]
查看完整版本: 【已解决】有什么办法可以检查大量图像之中的重复项？