Программы для поиска дубликатов файлов на компьютере

SearchMyFiles

Компактная утилита от NirSoft, способная находить файлы без индексирования даже в скрытых папках. Не предусматривает системной установки (достаточно распаковки в отдельный каталог). Распространяется на полностью бесплатной основе и не требует ключей. Предлагает большой набор настроек. Дополнена опцией поиска по тексту для документов Microsoft Office и Adobe Reader (PDF).

Программа SearchMyFiles адаптирована для поиска одинаковых файлов на ноутбуках и стационарных ПК. Способна задавать исключения. Предусматривает использование типов и масок. Ищет файлы-дубликаты и папки по времени создании и последнего открытия, размеру, названию (латиница и киррилица), атрибутам.

Найти дубликаты фотографий с помощью Image Comparer

Первая программа в нашем обзоре, ищущая дубликаты фото, называется Image Comparer. Её сильные стороны: неплохая функциональность и переведённый на русский язык интерфейс, включая подробную справочную информацию.

Теперь о недостатках. Первый – программа не бесплатная. Впрочем, стоимость лицензии составляет гуманные 350 рублей (хотя на сайте почему-то указана цифра 500). Вдобавок первые 30 дней вы можете использовать Image Comparer бесплатно.

Второй негативный момент заключается в лёгкой запутанности, которая может смутить неопытного пользователя. Например, для того чтобы провести поиск в рамках одной папки (в которую могут быть вложены и другие) вам нужно нажать на кнопку «создать галерею» и выбрать нужный каталог, в котором будет проводиться сканирование.

Далее вам тут же предложат дать имя и сохранить файл создаваемой галереи в любое удобное место (этот файл нужен будет самой программе). Как только это будет сделано, перед вами в виде списка или миниатюр откроется перечень всех изображений в указанной папке и её подпапках:

Кнопки, отмеченные стрелками, запускают поиск дубликатов. Первая кнопка – поиск в рамках одной галереи (выбранной вами папки), вторая кнопка чуть правее – в рамках нескольких галерей. Мы пошли по первому варианту.

Следом программа предложила создать ещё один служебный файл, в котором будут сохраняться результаты для дальнейшего удобного к ним доступа. Собственно, создание файла для галереи и вот этого файла с результатами поиска как раз и может немного запутать неопытного юзера. Впрочем, далее всё уже просто. Перед вами появятся найденные дубликаты:

Их можно просматривать в виде миниатюр или же, щёлкнув по вкладке «пары изображений», перейти к виду, где фотографии будут уже сравниваться между собой:

Ползунок по центру позволяет регулировать порог схожести изображений. Установите 100% и перед вами останется только список идеально похожих друг на друга одинаковых картинок. Более низкие значения отобразят лишь схожие фотографии.

В настройках можно увидеть огромный список форматов от базовых JPG и PNG до более экзотических, с которыми работает программа. Форматы можно добавлять и исключить из поиска. Также можно настроить учёт отражённых и перевёрнутых картинок.

Что умеет программа:

• Поиск фото дубликатов и похожих изображений по фактическому содержанию изображений
• Сканирование на предмет дубликатов внутри одной папки или сравнение между двумя папками
• Определение фото дубликатов в различных форматах: RAW, JPEG, J2K, BMP, GIF, PNG, TIFF, TGA
• Выбор индивидуального порога схожести для фильтрации похожих соответствий
• Предварительный просмотр фотографий во встроенной системе просмотра изображений
• Классификация и сортировка файлов изображений по различным критериям: название, дата, размер, ширина, высота
• Удаление, копирование, перемещение файлов одним кликом
• Автоматическая отметка изображений с высоким или низким качеством для последующих операций над ними
• Программа имеет русскоязычный интерфейс (среди десятков других доступных языков)

Находите дубликаты фотографий или похожие изображения с легкостью

Image Comparer позволяет находить дубликаты фотографий в компьютерной коллекции и без труда удалять лишние фотографии. Чтобы начать поиск, просто запустите Мастер сравнения, уточните, необходим ли поиск внутри одной папки, или сравнение двух папок, и выберите целевой каталог для сканирования. Можно также задать собственный уровень схожести изображений, который определяет, с какой точность Image Comparer будет искать сходства в файлах. По умолчанию, этот параметр устанавливается на уровне 95%. Наконец, нужно выбрать папку сохранения результатов и кликнуть на кнопке «Старт», чтобы запустить поиск.

Обзор программы Image Comparer

Image Comparer представляет совершенно новую технологию того, как пользователи могут находить дубликаты фото. В отличие от большинства программ поиска дубликатов, которые выполняют поиск дубликатов по имени файла, его размеру и не способны находить похожие файлы, Image Comparer может находить похожие файлы с любой степенью схожести, которая может быть задана пользователем. Более того, программа Image Comparer способна
анализировать и распознавать изображения по содержанию,
независимо от имени файла, формата, размера изображения, битовой глубины и расположения объекта. Программа распознает даже повернутые или перевернутые фото или фотографии с разными условиями съемки. Инновационный алгоритм сравнения фотографий, основанный на содержании, обеспечивает феноменальную точность.

Advanced SystemCare Free

Адвансед Систем Кар Фри – многофункциональная утилита с удобным интерфейсом и мощными инструментами для оптимизации пространства жесткого диска и ускорения работы ОС. Качественно очищает мусор из системных библиотек, защищает от спама и фишинга, блокирует вредоносное ПО. Имеет встроенную опцию поиска файлов-дубликатов любого формата с возможностью безвозвратного удаления и зачистки всех «хвостов».

Бесплатная версия программы совместима с Windows 7,8,10. Доступна к безопасной загрузке на официальном сайте IOBit. Дополнена настраиваемой функцией чистки истории посещенных страниц, кэша, cookie. Освобождает и релевантно распределяет оперативную память. Улучшает надежность соединения с сетью Интернет и ускорят обмен данными (до 2,5-3 раз).

Ищем похожие изображения с Similar Images Finder

Приложение Similar Images Finder встречает нас недобрым сообщением на английском о том, что за него нужно заплатить $34. Тем не менее на протяжении 30 дней программа готова поработать бесплатно. Следом появляется окно, предлагающее выбрать каталоги для поиска дубликатов:

Из него же мы узнаём, что Similar Images Finder поддерживает 29 форматов изображений, причём пользователь может выбирать конкретные форматы для поиска или исключать лишние. В списке, помимо прочего, можно наблюдать ico и wbmp.

При нажатии Next вы запустите поиск дубликатов, а когда он будет закончен, нажмите Next ещё раз, чтоб увидеть дополнительные настройки. Регулируя их, вы сможете более тщательно настроить то, что отобразится в списке результатов. Наконец, нажав Next в третий раз, вы увидите уже и сам результат:

Перейти к следующей найденной картинке можно нажатием миниатюрной стрелочки в верхнем правом углу. Весь список найденных дубликатов открывается кликом по большой кнопке вверху с адресами текущих файлов.

В свою очередь, нажатие кнопки Next внизу приведёт к завершающему этапу работы. Там программа выведет список того, что, по её мнению, точно является дубликатами и предложит их удалить. На скриншоте выше Similar Images Finder справилась с изображением, куда был добавлен водяной знак, а также изменён контраст гистограммы.

Различая между картинками программа посчитала на уровне 5,5%. При этом в другом примере, где на вторую картинку нами был добавлен сильный эффект размытия, отличия, по версии приложения, почему-то составили всего 1,2%:

Увы, программа, находя реальные дубликаты, по умолчанию показывает и многие совсем непохожие друг на друга изображения, как будто в них есть что-то общее:

Удаляйте, копируйте, перемещайте файлы одним кликом

Image Comparer позволяет выполнять различные действия с найденными дубликатами. Когда сканирование закончено, программа отображает результат сравнения — перечень фотографий в галерее вместе с десятью самыми похожими изображениями для каждого выбранного фото. Можно также просматривать предполагаемые дубликаты парами, рядом друг с другом. Запись каждого фото-файла содержит подробные данные о формате изображения, разрешении и размере файла. Лишние файлы можно выделить, поставив отметку, и выполнить действия по ним — копировать, перемещать их в отдельную папку, или просто удалять. Также есть опция, позволяющая автоматически отмечать фото-файлы с высоким и низким качеством.

Кому Image Comparer™ наиболее полезен?

Image Comparer может быть полезен каждому, кто хранит фотографии в компьютере. Вот некоторые примеры.

• Профессиональные фотографы. Будучи фотографом, вы сможете автоматически выделить серии фотографий и выбрать в каждой лучшие изображения. Специально для фотографов, мы добавили поддержку формата изображений RAW.
• Веб-мастера. Веб-мастера, сайты которых содержат много фотографий и графики, могут использовать Image Comparer, чтобы упорядочить изображения и удалить дубликаты фото, которые занимают место на жестком диске.
• Коллекционеры фотографий. Люди, которые собирают фотографии, цифровые изображения и обои для рабочего стола могут положиться на Image Comparer — он удалит лишние или слегка измененные файлы и сделает коллекцию уникальной.

Находите дубликаты и похожие картинки по фактическому содержанию изображения

Удалите лишние фото, и пусть ваша РС коллекция фотографий будет безупречной.

Image Comparer представляет собой программу поиска дубликатов для любого фото-коллектора. Как только вы установите программу на компьютер, она автоматически отыщет копии фотографий или фотографии с различной степенью схожести. Все, что вам нужно, это выбрать папку для сканирования и начать поиск. Используя инновационную технологию сравнения фотографий на основе содержания, Image Comparer произведет анализ каждого фото в выбранной папке и
найдет точные копии или близкие соответствия по фактическому содержанию изображения. Получив результаты, просто поставьте отметку рядом с нежелательными файлами и удалите их все, лишь кликнув мышкой. Вот и все. Вам не нужно просматривать папки и запоминать то, что вы увидели. Программа Image Comparer поставит весь процесс на автопилот, так что вам не нужно будет беспокоиться. В качестве дополнительного преимущества, программа Image Comparer предлагает встроенную систему просмотра изображений, чтобы вы были уверены, что удалили то, что действительно хотели.

Программа Image Comparer работает на Windows 2000 / XP / Vista / 7 / 8 / 10 и имеет бесплатную ознакомительную 30-дневную версию.

Программа для поиска дубликатов Awesome Duplicate Photo Finder

Если вы ищете именно предельно простую программу для качественного поиска дублирующихся фото и изображений, в которой было бы элементарно легко разобраться, то обратите внимание на Awesome Duplicate Photo Finder. Интерфейс здесь на английском, но он настолько прост, что разберётся в нём каждый

С помощью кнопки «+» укажите нужный для поиска каталог или несколько каталогов, после чего нажмите Start Search и по ним начнётся поиск. Опция Scan Subdirectories по умолчанию включена и отвечает за поиск в подпапках. Со своими задачами программа справляется, находя как весьма похожие:

Так и чуть более отличающиеся между собой картинки:

В настройках программы вы можете задать соответствие в 100%, если вам нужны исключительно абсолютно одинаковые фотографии.

Самих настроек, как видите, немного. Пожалуй, самое печальное, что работает программа всего с пятью основными форматами: BMP, JPG, PNG, GIF и TIFF. Причём последний по умолчанию не учитывается.

Также есть опции для обеспечения удаления дубликатов напрямую в корзину и отключения всплывающего подтверждения. Ещё программа умеет обновляться автоматически.

Нахождение одинаковых фотографий в три клика с VisiPics

Следующая программа – VisiPics. В отличие от рассмотренной выше Image Comparer, VisiPics является бесплатным приложением, также специализирующемся на дубликатах фото. Увы, локализации на русский здесь нет, но расстраиваться по этому поводу точно не стоит: всё очень просто и предельно понятно.

С помощью боковой панельки навигации (мы обвели её в рамку) выберите нужный каталог. Далее нажмите стрелочку со значком «+», чтобы добавить эту папку в список, по которому будет вестись поиск. При желании таким же образом вы можете выбрать ещё несколько папок. Наконец, третьим шагом нажмите кнопку Play, чтобы запустить процесс нахождения дубликатов.

Справа от неё располагается специальный ползунок, где вы можете настраивать уровень «внимательности» программы. В случае установленного по умолчанию базового уровня VisiPics обнаружила для нас лишь две группы дубликатов, одна из которых состояла из трёх изображений, а другая из двух:

Это те изображения, которые программа считает практически идентичными дубликатами. Однако если вы понизите ползунок до уровня Loose, то находиться будут и просто похожие друг на друга изображения. В нашем случае при установке Loose вместо Basic приложение нашло ещё четыре (в итоговом тесте ниже – 5) группы дубликатов, а одну из двух уже найденных дополнило ещё одной картинкой:

Дополнительных опций у программы относительно немного. Здесь можно настроить поиск в подпапках (по умолчанию он включён), отображение скрытых папок, учёт фотографий, повёрнутых на 90 градусов. На вкладке loader можно попросить VisiPics игнорировать мелкие файлы или, наоборот, картинки в слишком большом разрешении

Последнее важно для скорости

Самые быстрые программы для поиска дубликатов фото

В то же время, качество программы ещё зависит и от её скорости. 60+ картинок – это, конечно же, не то, с чем могут работать пользователи. Поэтому мы провели ещё один тест. На этот раз на скорость. Для этого мы взяли подборку из 4450 самых разных изображений, общий вес которой превысил 2.1 ГБ.

Две программы из этого обзора, увы, в тесте не заняли никакого места. Как выяснилось, Similar Images Finder, за который просят 34 доллара, в бесплатной версии готов зараз обработать не более 200 изображений.

В свою очередь, универсальный поисковик дубликатов Duplicate Remover Free, столкнувшись с каталогом серьёзного размера, более пяти минут интенсивно работал, а потом основательно завис. Остальные программы показали следующее время:

• AntiDupl: 0:39;
• Image Comparer: 1:02 (35 секунд на создание галереи и 27 на поиск);
• VisiPics: 2:37;
• Awesome Duplicate Photo Finder: 3:17.

В итоге в тесте на скорость в лидеры явно выбились Image Comparer и AntiDupl. На обработку нашего архива у них ушло около или же, в случае AntiDupl, меньше минуты.

Какая программа лучше ищет одинаковые и похожие фотографии?

При поиске дубликатов часть пользователей интересует именно 100% соответствие, чтобы избавиться от дублей в своей коллекции. Однако нередко возникает и задача найти просто похожие картинки.

И вот здесь огромное пространство для возможных отличий. Этот могут быть разные форматы, разрешения, обрезанные версии одного и того же изображения, добавление рамок и водяных знаков, изменённые цвета и подписи на картинках.

Мы постарались учесть большинство из этих факторов и после всех проб создали в итоге небольшой набор с более чем шестью десятками картинок. В них мы создали девять групп дубликатов. Скажем честно, на истину в последней инстанции наш опыт точно не претендует, но попробовать было интересно. Результаты следующие:

• Duplicate Remover Free: нашёл лишь 3 группы дубликатов;
• Similar Images Finder: нашёл 4 группы, но неудобный интерфейс, множество ложных результатов и при этом платность приложения сильно испортили общее впечатление;
• AntiDupl по умолчанию нашёл 3 типа дубликатов, установка алгоритма SSIM увеличила результат поиска до 5 групп;
• VisiPics при базовом уровне поиска нашёл лишь 2 группы дубликатов, однако установка ползунка на уровень Loose позволила найти уже 7 групп;
• Awesome Duplicate Photo Finder нашёл 7 групп дубликатов;
• Image Comparer также сумел обнаружить 7 групп.

При этом Image Comparer сумел найти изображения, которые пропустили Awesome Duplicate Photo Finder и VisiPics, а те, в свою очередь, восполнили пробелы Image Comparer.

Easy Duplicate Cleaner

Специализированный софт для поиска и удаления одинаковых файлов с ПК и в локальной сети. Обрабатывает мультимедиа, фото, изображение, открывая картинки для сравнения идентичности. Совместим со всеми версиями Windows от XP и выше. Располагает русскоязычным интерфейсом. Имеет встроенный механизм для защиты системных данных от случайной очистки и внесения изменений.

Программа для нахождения дубликатов Easy Duplicate Cleaner поддерживает алгоритмы поиска по имени, размеру, расширению, контенту, дате. Предоставляет детальную информацию по всей выборке отсканированных объектов. Обеспечивает прямое перемещение, копирование, переименование и удаление дублирующих файлов. Применяет цветовую маркировку для четкого выделения файла-оригинала. Занимает мало места после инсталляции и не провоцирует системных ошибок.

Поиск дубликатов файлов с помощью CCleaner

Программу, качаем с официального сайта

Устанавливаем.

При первом запуске выйдет окошко приведенное ниже. Если выбрать Да, то при очистке компьютера по умолчанию, возможно, не собьется авторизация на приведенных почтовый cервисах. Нажимаем Да

Переходим, слева, на вкладку Сервис

Нажимаем на кнопку Поиск файлов

Для поиска одинаковых файлов осталось только указать нужные настройки

Настроек не много и разбиты они на три группы:

• Совпадение
• Пропуск
• Место где искать и места исключения

Остановимся на каждой группе подробнее

Совпадение

Можно установить поиск файлов дубликатов по Имени, Размеру, и Дате изменения. Так же можно комбинировать эти критерии устанавливая больше одной галочки. При упорядочивании фото на компьютере родителей первым делом произведу поиск с совпадением по Имени. Скорее всего найдется куча файлов сохраненных в различных местах. Затем, интересен будет поиск с совпадением по Размеру. Так как фото может быть переименовано, но размер не должен измениться.

Пропуск

Какие файлы необходимо пропустить при поиске дублей. Здесь возможны следующие варианты:

• Байты с размером 0
• Файлы только для чтения
• Размер менее х МБ
• Системные файлы
• Скрытые файлы

С все понятно. Если вы собираетесь искать дубли фото, то вероятность не большая, что какие-либо из них окажутся скрытыми или системными.

Сомнительна функция — Байты с размером 0. Возможно это ошибка перевода, и там должно быть Файлы с размером 0. Тогда все логично, так как действительно есть файлы с 0-вым размером. (Например пустой текстовый документ или файл создан в другой ОС (Ubuntu например и в его названии используется недопустимые в Windows символы (: например)). Хотя, целесообразность наличия пустых документов в системе сомнительна.

Да, это перевод подгулял. В английской версии там именно файлы, а не байты.

С файлами только для чтения так же вроде все ясно, если они нужны в поиске, то убираете соответствующую галочку.

Если вы знаете, хотя бы приблизительно, размер файла, дубликат которого хотите найти, то для ускорения поиска сильно поможет функция — Файлы размером менее Х МБ. Если вы ищите фотографии, которые в основном по 2.5 МБ и больше, то можно исключить файлы размером менее 2 МБ. Если у вас в поиск дубликатов включен системный диск (том на котором установлена операционная система (Windows например)), то это нереально ускорит поиск. Так же поиск быстро идет на SSD дисках.

Место где искать и места исключения

Здесь с помощью кнопки Добавить на вкладке Включения задаете где искать дубликаты файлов. На вкладке Исключения добавляете места на жестком диске, флешке или на внешнем жестком диске, где не производить поиск.

В принципе все просто. Для сброса настроек нажимаете соответствующую кнопку.

Когда фильтр настроен нажимаете Найти.

Заключение

Подведём итоги. Если вам нужно найти не одинаковые, а именно похожие фотографии, отличающиеся, например, подписью или водяным знаком, то лучше остальных с этой задачей справятся Image Comparer, Awesome Duplicate Photo Finder и VisiPics в режиме работы Loose.

В плане скорости обработки многочисленной коллекции изображений безусловные лидеры – AntiDupl и Image Comparer.

Наконец, в плане удобства интерфейса нам понравились Image Comparer и VisiPics, с ходу позволяющие визуально оценить все группы дубликатов. В свою очередь, за наглядность сравнения характеристик отдельных дубликатов мы также отметим AntiDupl.

Заключение

Вот так с помощью старой доброй CCleaner собираюсь искать дубликаты файлов на своих и не только компьютерах. Для моих целей функционала программы достаточно

Если вам нужно больше, тогда стоит обратить внимание на DupKiller. Эта бесплатная программа, почитать о ней и скачать ее можно с официального сайта http://dupkiller.com/index_en.html. DupKiller имеет на много более широкие возможности выполнить настройку поиска

Так же там реализован просмотр графических файлов и прослушивание аудио. Интересна возможность задания не точного совпадения файлов, а до определенного уровня (процента).