重复的文件查找器

有什么好的工具来查找重复的文件? 录制备份CD / DVD时,重复文件非常糟糕,那么我想在备份过程之前传递可靠的重复文件查找程序。

我使用Windows7,但任何Windows兼容的工具将是很好的。

我喜欢在Windows上Ashisoft的Duplicate Finder 。 该产品不是免费的,但是它有非常好的比较文件的方法,它可以使用逐字节,校验和,ID3标签信息或其他一些信息。 它有一个select工具,以帮助您select哪些文件,你想保持dups。

我使用重复文件查找器 。 它适用于32位或64位(x64)Windows NT / 2000 / XP,Windows 2003和Windows Vista

使用超越比较 可视化比较您的FTP服务器上的文件与PC上的文件夹或只是比较2个本地文件夹。

它甚至可以比较许多文件types的内容 ,并可以直观地显示文件,图片,MP3和二进制等文件的差异。

它的合并function可以帮助您整合脚本和文本文件。

如果真的有这么多问题(你是否真的在你的机器上有很多大的重复文件?),那么最好在你的备份软件中处理这个问题。我知道BackupPC声称通过将所有内容存储在内容的散列之下来解决这个问题。从那里索引,但是否与您的操作系统兼容是未知的。

寻找模糊并不困难 – 只需md5对系统中的每个文件进行散列,而具有相同散列的任何文件都是重复检测的候选对象(仍然需要比较实际文件内容以确保它不是散列冲突)。 20行的shell脚本或Powershell应该这样做。 但是一旦你find他们,你会怎么做? 如果您只需要一个副本,删除就可以工作,但是如果您将其从备份中排除,那么备份将不会完成。 最好有备份程序为你处理。