Как я могу определить дубликаты файлов изображений?

Question

За прошедшие годы я накопил много фотографий на разных машинах.

Я думаю, что я в основном держал их в структуре директорий гггг / мм /, но особенно с некоторыми более старыми картинками, кажется, есть много дубликатов.

Какой лучший способ идентифицировать дубликаты? Есть ли хорошие инструменты для этого или мне придется написать что-то самостоятельно?

Answer 1

Ряд программ может найти дубликаты на основе содержимого изображения. Некоторые приложения для управления активами сделают это, и есть также специальные программы. Если вы Google обнаружите дубликаты изображений, вы увидите довольно много вариантов. Посмотрите, какие из них доступны для вашей платформы.

Другое решение - просто импортировать файлы с опцией «игнорировать дубликаты». Picasa, которая бесплатна, может это сделать.

Answer 2

Для Linux попробуйте FSlint . Это немного медленно, но обязательно найдет дубликаты.

Answer 3

Picasa имеет средство поиска дубликатов файлов, но трудно определить, на что вы обращаете внимание: запустите Picasa; нажмите Tools> Experimental> Show Duplicate Files. Это работает , но будьте осторожны с тем, что вы удаляете.

Другим вариантом является бесплатный «Быстрый поиск дубликатов файлов»:

Быстрый поиск дубликатов файлов

Что мне понравилось в этом, так это то, что он позволяет вам предварительно просмотреть изображение, прежде чем решить, что не нужен дубликат.

Это прекрасно работает, если файлы идентичны , но если вы ищете похожие фотографии (например, те же фотографии, но с измененным размером, повернутые или измененные), вы можете посмотреть их обновленную версию. :

Визуальное сходство Поиск дубликатов изображений

Я не использовал эту программу, но я использовал очень похожую программу (больше не сделанную), и я нашел ее очень полезной. У них есть бесплатная загрузка, так что, возможно, стоит проверить.

Answer 4

dupeGuru Picture Edition - настраиваемый искатель дубликатов изображений для Windows, Mac OS X и Linux.

Существует несколько версий dupeGuru (стандартные, музыкальные и графические издания), а редакция изображений позволяет вам находить визуально похожие изображения с помощью алгоритма сравнения с блокировкой растровых изображений, среди других методов (таких как временная метка исходного изображения EXIF ​​или файлы, являющиеся просто идентично).

Имеет множество других полезных функций, таких как исключенные папки, поддержка библиотек iPhoto / Aperture и значительные настройки того, как он обнаруживает дубликаты и что с ними делает.

Answer 5

www.s Similar.pictures - это онлайн-программа для поиска около и точных дубликатов.

Я написал это, потому что Picasa обычно находил точных копий. А теперь Picasa ушел.

Answer 6

На моем Mac у меня был отличный успех с PhotoSweeper (http://overmacs.com/).. Он может работать напрямую через файловую систему или с помощью популярных программ для фотосъемки, таких как Apple Photos и Adobe Lightroom. Он может найти либо точное дубликаты или аналогичные файлы изображений. И за 10 долларов это украсть.

Answer 7

digikam (Linux, Windows и Mac) имеет боковую панель под названием версии

На вкладке «Версии» отображается история и сохраненные версии фотографии. С помощью трех кнопок в верхнем правом углу вы можете выбирать между простым списком сохраненных версий, древовидным представлением и комбинированным списком, который показывает версии вместе с действиями, выполненными с выбранной фотографией.

и еще одно название search

Быстрый поиск - это поле адаптивного поиска в верхней части диалогового окна поиска (левая боковая панель), которое предоставляет вам простые средства для поиска в базе данных digiKam с помощью одного запроса. Вы можете ввести любые аргументы в текстовое поле Search: и оно будет использоваться для определения результатов. Например, вы можете ввести строку 'birthday', чтобы найти в полной базе данных вхождения слова 'birthday' во всех текстовых полях метаданных, или '05 .png ', чтобы найти определенное имя файла изображения '05 .png' ( не нужно убегать, как в регулярных выражениях).

(он также имеет расширенные настройки, позволяющие выполнять несколько логических поисков)

и еще один под названием нечеткий

digiKam характеризует каждое изображение длинным числом, используя специальную технику (алгоритм Хаара), которая позволяет сравнивать изображения путем сравнения этой вычисленной сигнатуры. Чем меньше численная разница между любыми двумя сигнатурами изображений, тем больше они похожи друг на друга. Эта техника имеет три реализации в digiKam: ...

1. Дубликаты
2. Изображение (Аналогичные предметы)
3. Sketch

Хотя генерация «подписей» и их перекрестная проверка на большом количестве изображений могут быть медленным процессом. Также имейте в виду, что некоторые люди не фанаты, потому что это проект KDE, который не полностью интегрируется с другими средами рабочего стола, и он пытается быть единым приложением с загрузкой изображений, каталогами / текстами, разработкой RAW, обработкой изображений и многим другим. включен.

Answer 8

Мои два цента. Я использовал:

Pixiple github.com/saolaolsson/pixiple

VisiPics www.visipics.info в Windows 10.

Одна вещь, на которую стоит обратить внимание, это «нечеткость» поиска. Иногда программа находит похожие фотографии, например, вариации одной и той же фотосессии. Не удачный триггер при удалении ваших изображений.

Answer 9

DeDup-Image - это скрипт bash для автоматического поиска и удаления идентичных изображений / дубликатов фотографий, даже если метаданные отличаются. Он всегда сохраняет самую большую копию, которая, вероятно, содержит наибольшее количество метаданных и удаляет все другие найденные объекты на основе SHA256-HASH информации реального изображения без каких-либо метаданных. Поскольку сценарию требуется обрабатывать вариант из каждого изображения без метаданных, он немного медленнее и требует больше ресурсов процессора, чем программы или сценарии, которые могут искать только полностью идентичные файлы.

Answer 10

Acdsee - это простое / популярное приложение для просмотра фотографий, которое имеет эту функцию (Инструменты -> Найти дубликаты).