Лучшие программы для поиска дубликатов (одинаковых) файлов. Лучшие программы для поиска дубликатов файлов

Доброго дня!

Я думаю, что у многих пользователей на диске лежат десятки (а то и сотни) гигабайт картинок, обоев, видео, музыки и пр. файлов. И должен заметить, что в разных каталогах (в сборниках обоев, например) могут находится достаточно много копий (дублей). Нередко, после их удаления, удается освободить несколько гигабайт пространства на HDD!

Для поиска дубликатов существуют специальные программы и утилиты. Они способы за относительно небольшое время просканировать ваш жесткий диск(и) и представить вам на обозрение все одинаковое. Дальше, как правило, вам останется только пометить галочками, что удалить - и вуаля, место очищено!

В этой статье приведу несколько таких "чистильщиков", которые помогут вам освободить место на жестком диске. И так...

Дополнение!

Универсальные (поиск любых файлов)

Универсальные программы для поиска дублей подойдут для работы с любыми файлами: документами, фотографиями, видео и пр. Как правило, их работа строится на поиске файлов одинакового размера и контрольной суммы. Т.е. эти программы ищут точные копии, совпадающие на 100%!

Благодаря этому, их скорость работы достаточно высока. Однако, они не могут найти, например, почти одинаковые картинки, которые сохранены в разных форматах и отличным разрешением. Для этого необходимо использовать спец. ПО, которое я порекомендую ниже...

CCleaner

Одна из самых известных утилит по очистке ПК. Однако, не многие пользователи знают, что в ее арсенале есть функция по поиску дублей (причем, весьма неплохая функция!).

Чтобы открыть эту опцию: необходимо загрузить последнюю версию программы, в меню "Сервис" выбрать "Поиск дублей" , указать настройки и нажать кнопку "Найти" .

Отмечу, что поиск идет достаточно быстро, можно фильтровать файлы по их размеру, дате имени. Также вручную можно задать конкретные диски (папки) для поиска. В общем, довольно удобно!

Glary Utilities (Glary Duplicate Cleaner)

Glary Utilities - отличный набор утилит на все случаи жизни. Содержит в себе все самые необходимые инструменты для очистки, обслуживания и оптимизации Windows. Этот комплекс я уже неоднократно рекомендовал на страницах своего блога ...

В его арсенале встроенного ПО есть одна небольшая утилита Glary Duplicate Cleaner. Она позволяет достаточно быстро находить дубли самых разных форматов файлов: TXT, RAR, ZIP, MP3, WAV, AVI, JPG, BMP и пр. (в общем, все самое популярное точно есть, см. скрин ниже).

Настройка параметров сканирования / Glary Duplicate Cleaner

Также есть небольшой фильтр с критериями поиска: по имени, размеру, времени. Есть опция для пропуска файлов определенного размера (например, можно пропускать файлы, которые весят менее 100 КБ).

Отмечу, что пакет Glary Utilities бесплатен, и полностью переведен на русский язык. В общем, оценка 5 по 5 бальной шкале!

AllDup

Это небольшая бесплатная утилита способа очень быстро просканировать все ваши накопители и удалить все повторяющиеся файлы. Разработчики отмечают, что их алгоритм поиска на 10-30% работает быстрее, чем у других аналогичных продуктов.

Лично я скорость не проверял, но отметил бы следующее: утилита работает во всех ОС Windows 2000, XP, 7, 8 ,10 (это некое преимущество!).

После произведенного поиска, утилита AllDup представит вам результаты: с каждым дубликатом вы сможете ознакомиться и удалить его прямо из интерфейса программы. Удобно!

Duplicate File Finder

Бесплатный инструмент для очистки дисков от повторяющихся файлов. Программа побайтово сравнивает файлы на указанном диске (каталоге). Присутствуют стандартные фильтры: расширение файла, его имя, дата создания, и размер.

С результатом поиска (пример приведен на скрине выше) можно либо ознакомиться в самой программе (и принять решение), либо экспортировать его в файлы HTML, CSV и TXT. Кстати, отметил бы, что в программе достаточно удобный вьювер, позволяющий просмотреть картинку, текст, видео.

Total Commander

В этом знаменитом коммандере (хорошей замене проводника) также есть функция поиска файлов. Чтобы ее открыть - нажмите по значку "лупы" в верхнем меню программы (см. скрин выше).

Возможностей, конечно, здесь не так много, но тем не менее...

Для поиска фото, картинок, графики

Эти программы могут производить поиск не только по размеру (контрольной сумме) файла, но и по содержимому картинки. Например, у вас есть несколько одинаковых обоев для рабочего стола, располагающихся в двух разных папках (но у этих картинок разный размер и разрешение).

Так вот, программы, приведенные выше - не нашли бы эти дубликаты, т.к. они "не могут" оценить то, что отображено на картинках. В этом случае необходимо воспользоваться спец. инструментами (о них ниже ) ...

Image Comparer

Это совсем небольшая утилита, специализирующаяся на поиске похожих изображений. Отмечу, что она сравнивает не просто размер, а то, что изображено на картинке (см. скрин выше). Поддерживаются все популярные форматы картинок и фото: RAW, JPEG, J2K, BMP, GIF, PNG, TIFF, TGA и др.

После проведенного поиска, пред вами предстанет список дубликатов: пройдясь по нему, вы сможете просмотреть все копии и удалить те, которые вам не нужны. Что интересно: программа показывает вам процент похожести тех или иных картинок (разница между ними выделяется при просмотре квадратиками).

Из минусов : если вы укажите большой диск (в несколько терабайт) - программе потребуется очень большое время на сканирование. Рекомендую перед ее использованием пройтись по картинкам с помощью более грубых инструментов (например, CCleaner, AllDup и пр., см. выше) .

DupeGuru Picture Edition

Очень простенькая утилита, которая предназначена для быстрого поиска одинаковых картинок. Отмечу, что похожие картинки будут найдены даже если у них разный формат (например, JPG и Tiff как на скрине выше).

Из преимуществ утилиты:

• наглядное сравнение картинок;
• программа полностью бесплатна;
• простой интерфейс, выполненный в стиле минимализма;
• поддержка русского языка;
• возможность экспортировать результаты поиска;
• поддержка всех самых популярных версий Windows XP, 7, 8 ,10.

ImageDupeless

Программа ImageDupeless позволяет находить дубликаты картинок в независимости от размера файлов, их формата, разрешения и пр. характеристик (она как бы за вас "посмотрит" все картинки и найдет похожие).

Также в программе есть весьма интересная функция записи изображений на CD диски (создание своеобразных CD галерей).

Примечание : для экономии времени вновь поступающие картинки сравнивайте с уже имеющейся галереей (так вы сэкономите кучу времени, т.к. полное сканирование всех картинок на диске - это значительно дольше, чем уже искать в созданной галереи) .

Результат сравнения: обратите внимание, что разрешение и размер у картинок разный!

Visual Similarity Duplicate Image Finder

Программа использует продвинутые алгоритмы для сравнения графических образов, имеющихся на картинках и фотографиях. Благодаря этому удается найти похожие и одинаковые картинки, даже если у них разный формат (GIF, PNG, JPG и пр.) и разрешение.

Отмечу, что у пользователя есть опция для указания признака похожести (т.е. вы можете задать, скажем, найти только те картинки, которые схожи друг с другом на 95%).

После проведения поиска: вы сможете просмотреть все найденные дубли и вручную удалить все ненужное. Кстати, программа располагает рядом с друг другом 2 одинаковые изображения (пример см. выше), чтобы вы могли наглядно просмотреть разницу. Весьма удобно!

Для поиска аудио- и видео-файлов

Audio Comparer (Электронное ухо)

Audio Comparer - программа прослушает почти 300 треков за 10 мин.

Audio Comparer - это не такое простое приложение для поиска дублей среди музыкальных файлов (MP3, MP2, MP1, WMA, AIF, WAV, WavPack, FLAC, APE, AAC и OGG), как это может показаться при первом взгляде... Оно "слушает" музыку и сравнивает треки между собой по особому алгоритму: сравнение идет по аудио-дорожке, а не по размеру или названию файла (как это сделано во многих других аналогах).

Благодаря чему, одинаковые треки могут быть найдены даже в том случае, если они сохранены в разные форматы. Audio Comparer - это, своего рода, электронное ухо, которое может очень быстро прослушать всю вашу музыку.

Отмечу, что подобных программ достаточно мало, поэтому каждая заслуживает отдельного внимания! Рекомендую к знакомству!

DupeGuru Music Edition

Весьма интересная программа dupeGuru Music Edition для поиска одинаковых и похожих музыкальных треков. В наличии есть фильтры для поиска: по битрейту, информации в тегах, продолжительности, размеру и т.д.

Поддерживаются все самые популярные форматы: MP3, WMA, AAC, WMA, OGG, FLAC. После произведенного поиска, найденные дубликаты можно либо удалить, либо перенести в другие каталоги.

Отметил бы также наличие русского языка и поддержку современных ОС Windows 7, 8, 10 (в т.ч. 64 bits).

Music Duplicate Remover

Music Duplicate Remover - утилита позволяет легко и быстро находить копии аудио-файлов, расположенных в разных папках (дисках) и сохраненных в различных форматах. Благодаря технологии "электронного уха", она способна прослушать все ваши композиции на диске, проанализировать их и предоставить вам отчет со всеми похожими треками (пример такого отчета показан на скриншоте выше).

Отмечу, что утилита отлично работает и со стандартными предустановками (т.е. после ее загрузки и запуска - нет нужды долго копаться в настройках, можно сразу же приступать к сканированию).

Примечание! Music Duplicate Remover поддерживает следующие форматы аудио: MP3, WMA, OGG, FLAC, APE, WAV.

Duplicate Video Search

Довольно мощная программа для удаления одинаковых видео, сохраненных в разных папках (подойдет тем, у кого много всяких видеороликов, музыкальных клипов, сборников топ-100 и пр.). Поможет "прошерстить" вашу коллекцию файлов и удалить все дубли.

Отмечу, что в программе используется технология уникального "слепка" (т.е. своего рода "электронный глаз"), которая позволяет находить похожие видео, даже если они сохранены в другой формат, у них другое разрешение и они сжаты другим кодеком.

Особенности:

1. поддерживаются следующие форматы видео: AVI, MKV, 3GP, MPG, SWF, MP4, WMV, WTV и FLV (см. скрин выше);
2. поиск полных копий видео и похожих (где отличное разрешение, битрейт, формат, кодек);
3. программа автоматически выбирает видео с худшим качеством среди всех дублей (тем не менее, вы вручную можете указать, какую копию удалять);
4. удобное и наглядное представление результатов поиска: миниатюры к каждому видео и путь до каталога, где оно хранится;
5. прямо из окна программы можно либо просмотреть видео, либо удалить его.

Video Comparer

Video Comparer - программа предназначена для поиска и сравнения видео на жестком диске. За относительно короткий промежуток времени, она может просмотреть все ваши видео и показать вам в удобной табличке все файлы, которые повторяют друг друга (полные дубли, похожие ролики, видео с одинаковым содержимым, но разным качеством и пр.).

Отмечу, что в программе есть различные фильтры, которые позволят, например, искать видео только определенного формата (или задать продолжительность видео).

Особенности:

1. поддерживает форматы: 3GP, AVI, ASF, ASX, WMV, VOB, XVID, MP4, MPEG;
2. возможность вести поиск среди скрытых файлов;
3. возможность автоматического выделения похожих видео для удаления;
4. фильтры видео по продолжительности, качеству и расширению;
5. удобное представление результатов поиска: превью к каждому видео; размер; папка, где оно расположено; название; процент схожести.
6. возможность резервного копирования в отдельную папку;
7. ведение логов;
8. поддержка почти всех популярных Windows XP, 7, 8, 10 (32/64 bits).

Дополнения, как всегда, приветствуются.

Удачной работы!

В этом материале речь пойдёт об инструментах выявления дублирующихся фото. В частности, сегодня в нашем обзоре побывают сразу шесть программ для поиска дубликатов фотографий на компьютере под управлением Windows. Мы сравним и выберем среди них лучшие и самые быстрые.

Причин востребованности таких программ может быть несколько: с одной стороны, ваша коллекция могла разрастись настолько, что дубликаты уже занимают немало места. С другой, ещё чаще просто нужен инструмент, который найдёт одинаковые или похожие фотографии, избавив вас от необходимости просматривать эти изображения самостоятельно.

В нашей подборке нашлось место для шести интересных программ, четыре из которых распространяются бесплатно. Далее мы расскажем о каждой из них и поможем вам быстрее сориентироваться в интерфейсе, если вы решите попробовать эти приложения.

А в заключительной части вас ждёт небольшое сравнение всех программ, в котором мы посмотрим, как они справляются с поиском одинаковых картинок при их лёгком видоизменении, а также проверим насколько программы хорошо могут справиться с большим набором фотографий весом в несколько гигабайт.

Image Comparer

Первая программа в нашем обзоре, ищущая дубликаты фото, называется Image Comparer . Её сильные стороны: неплохая функциональность и переведённый на русский язык интерфейс, включая подробную справочную информацию.

Теперь о недостатках. Первый – программа не бесплатная. Впрочем, стоимость лицензии составляет гуманные 350 рублей (хотя на сайте почему-то указана цифра 500). Вдобавок первые 30 дней вы можете использовать Image Comparer бесплатно.

Второй негативный момент заключается в лёгкой запутанности, которая может смутить неопытного пользователя. Например, для того чтобы провести поиск в рамках одной папки (в которую могут быть вложены и другие) вам нужно нажать на кнопку «создать галерею» и выбрать нужный каталог, в котором будет проводиться сканирование.

Далее вам тут же предложат дать имя и сохранить файл создаваемой галереи в любое удобное место (этот файл нужен будет самой программе). Как только это будет сделано, перед вами в виде списка или миниатюр откроется перечень всех изображений в указанной папке и её подпапках:

Кнопки, отмеченные стрелками, запускают поиск дубликатов. Первая кнопка – поиск в рамках одной галереи (выбранной вами папки), вторая кнопка чуть правее – в рамках нескольких галерей. Мы пошли по первому варианту.

Следом программа предложила создать ещё один служебный файл, в котором будут сохраняться результаты, для дальнейшего удобного к ним доступа. Собственно, создание файла для галереи и вот этого файла с результатами поиска, как раз и может немного запутать неопытного юзера. Впрочем, далее всё уже просто. Перед вами появятся найденные дубликаты:

Их можно просматривать в виде миниатюр или же, щёлкнув по вкладке «пары изображений» перейти к виду, где фотографии будут уже сравниваться между собой:

Ползунок по центру позволяет регулировать порог схожести изображений. 100% – и перед вами останется только список идеально похожих друг на друга, одинаковых картинок. Более низкие значения отобразят лишь схожие фотографии.

В настройках можно увидеть огромный список форматов от базовых JPG и PNG до более экзотических, с которыми работает программа. Форматы можно добавлять и исключить из поиска. Также можно настроить учёт отражённых и перевёрнутых картинок.

• Программа Image Comparer . Официальный сайт ;
• Язык: русский;

VisiPics

Следующая программа – VisiPics. В отличие от рассмотренной выше Image Comparer, VisiPics является бесплатным приложением, также специализирующемся на дубликатах фото. Увы, локализации на русский здесь нет, но расстраиваться по этому поводу точно не стоит: всё очень просто и предельно понятно.

С помощью боковой панельки навигации (мы обвели её в рамку) выберите нужный каталог. Далее нажмите стрелочку со значком «+», чтобы добавить эту папку в список, по которому будет вестись поиск. При желании таким же образом вы можете выбрать ещё несколько папок. Наконец, третьим шагом нажмите кнопку Play, чтобы запустить процесс нахождения дубликатов.

Справа от неё располагается специальный ползунок, где вы можете настраивать уровень «внимательности» программы. В случае установленного по умолчанию базового уровня VisiPics обнаружила для нас лишь две группы дубликатов, одна из которых состояла из трёх изображений, а другая из двух:

Это те изображения, которые программа считает практически идентичными дубликатами. Однако если вы понизите ползунок до уровня Loose, то находится будут и просто похожие друг на друга изображения. В нашем случае при установке Loose вместо Basic приложение нашло ещё четыре (в итоговом тесте ниже – 5) группы дубликатов, а одну из двух уже найденных дополнило ещё одной картинкой:

Дополнительных опций у программы относительно немного. Здесь можно настроить поиск в подпапках (по умолчанию он включён), отображение скрытых папок, учёт фотографий, повёрнутых на 90 градусов. На вкладке loader можно попросить VisiPics игнорировать мелкие файлы или, наоборот, картинки в слишком большом разрешении. Последнее важно для скорости.

• Программа VisiPics. Официальный сайт ;
• Язык: английский;
• Распространение: бесплатно.

Awesome Duplicate Photo Finder

Если вы ищете именно предельно простую программу для качественного поиска дублирующих фото и изображений, в которой было бы элементарно легко разобраться, то обратите внимание на Awesome Duplicate Photo Finder. Интерфейс здесь на английском, но он настолько прост, что разберётся в нём каждый.

С помощью кнопки «+» укажите нужный для поиска каталог или несколько каталогов, после чего нажмите Start Search и по ним начинается поиск. Опция Scan Subdirectories по умолчанию включена и отвечает за поиск в подпапках. Со своими задачами программа справляется, находя как весьма похожие:

Так и чуть более отличающиеся между собой картинки:

В настройках программы вы можете задать соответствие в 100%, если вам нужны исключительно абсолютно одинаковые фотографии.

Самих настроек, как видите, немного. Пожалуй, самое печальное, что работает программа всего с пятью основными форматами: BMP , JPG , PNG , GIF и TIFF. Причём последний по умолчанию не учитывается.

Также есть опции для обеспечения удаления дубликатов напрямую в корзину и отключения всплывающего подтверждения. Ещё программа умеет обновляться автоматически.

Официальный сайт ;
• Язык: английский;
• Распространение: бесплатно.

Similar Images Finder

Приложение Similar Images Finder встречает нас недобрым сообщением на английском о том, что за него нужно заплатить $34. Тем не менее на протяжении 30 дней программа готова поработать бесплатно. Следом появляется окно, предлагающее выбрать каталоги для поиска дубликатов:

Из него же мы узнаём, что Similar Images Finder поддерживает 29 форматов изображений, причём пользователь может выбирать конкретные форматы для поиска или исключать лишние. В списке, помимо прочего, можно наблюдать ico и wbmp.

При нажатии Next вы запустите поиск дубликатов, а когда он будет закончен, нажмите Next ещё раз, чтоб увидеть дополнительные настройки. Регулируя их, вы сможете более тщательно настроить то, что отобразиться в списке результатов. Наконец, нажав Next в третий раз вы наконец-то увидите уже и сам результат:

Перейти к следующей найденной картинке можно нажатием миниатюрной стрелочки в верхнем правом углу. Весь список найденных дубликатов открывается кликом по большой кнопке вверху с адресами текущих файлов.

В свою очередь, нажатие кнопки Next внизу приведёт к завершающему этапу работы. Там программа выведет список того, что, по её мнению, точно является дубликатами и предложит их удалить. На скриншоте выше Similar Images Finder справилась с изображением, куда был добавлен водяной знак, а также изменён контраст гистограммы.

Различая между картинками, программа посчитала на уровне 5,5%. При этом в другом примере, где на вторую картинку нами был добавлен сильный эффект размытия, отличия по версии приложения, почему-то составили всего 1,2%:

Увы, программа, находя реальные дубликаты, по умолчанию показывает и многие совсем непохожие друг на друга изображения, как будто в них есть что-то общее:

• Программа Similar Images Finder. Официальный сайт ;
• Язык: английский;
• Распространение: платно, 30 дней бесплатного использования.

Duplicate Remover Free

Duplicate Remover Free – единственная в нашем обзоре программа, которая сосредоточена всё же не конкретно на дубликатах фотографий, а на поиске дубликатов в целом. Как показывает практика, такие универсальные решения не очень хорошо проявляют себя в задачах, связанных с какой-то более узкой областью.

Однако одной такой программе мы сегодня даём шанс. Как подсказывает слово Free – распространяется она бесплатно. Вторым достоинством приложения является русский язык, а третьим – относительная современность на фоне других программ в этой подборке, многие из которых, к огромному сожалению, не обновлялись уже долгие годы.

Вам следует кликнуть по кнопке «добавить директорию» и выбрать нужные папки. По умолчанию программа в заданном каталоге не нашла для нас вообще ничего, однако, когда вверху вместо «точные дубликаты» мы выбрали пункт «похожие изображения», тут же были найдены четыре группы дубликатов, одна из которых состояла сразу из трёх файлов:

Дополнительных возможностей у приложения совсем немного. В частности, вы можете исключать из поиска файлы до и после определённого размера.

• Программа Duplicate Remover Free. Официальный сайт ;
• Язык: русский;
• Распространение: бесплатно.

AntiDupl

Заключительный участник нашего обзора – программа AntiDupl может приглянуться вам сразу по нескольким причинам. Во-первых, она бесплатная. Во-вторых, у неё русский интерфейс. Последнее, впрочем, не очевидно. Для того чтобы включить русский, откройте меню View и в разделе Language выберете соответствующий пункт:

В отличие от других, эта программа не инсталлируется, а находится в самораспаковывающемся архиве, который извлекает её вместе с необходимыми файлами в отдельную папку.

Чтобы подготовить поиск дубликатов кликните по кнопке с подписью Open и в появившемся окне добавьте нужные каталоги:

Следом можно нажимать Ок, а потом активировать на панели инструментов зелёную кнопку «начать поиск». Используя базовый алгоритм, программа нашла для нас несколько групп дубликатов:

На вкладке «поиск» можно узнать, что AntiDupl поддерживает 13 форматов, среди которых помимо традиционных JPG/PNG, есть ICON, PSD и EXIF . Разумеется, форматы можно выбирать. Ещё в опциях есть проверка на дефекты, блочность и размытость, причём в последних двух случаях можно задавать порог. Есть возможность искать в скрытых и системных каталогах.

• Программа AntiDupl. Официальный сайт;
• Язык: русский;
• Распространение: бесплатно.

При поиске дубликатов часть пользователей интересует именно 100% соответствие, чтобы избавиться от дублей в своей коллекции. Однако нередко возникает и задача найти именно похожие картинки.

И вот здесь огромное пространство для возможных отличий. Этот могут быть разные форматы, разрешения, обрезанные версии одного и того же изображения, добавление рамок и водяных знаков, изменённые цвета и подписи на картинках.

Мы постарались учесть большинство из этих факторов и после всех проб создали в итоге небольшой набор с более чем шестью десятками картинок. В них мы создали девять групп дубликатов. Скажем честно, на истину в последней инстанции наш опыт точно не претендует, но попробовать было интересно. Результаты следующие:

• Duplicate Remover Free: нашёл лишь 3 группы дубликатов;
• Similar Images Finder: нашёл 4 группы, но неудобный интерфейс, множество ложных результатов и при этом платность приложения сильно испортили общее впечатление;
• AntiDupl по умолчанию нашёл 3 типа дубликатов, установка алгоритма SSIM увеличила результат поиска до 5 групп;
• VisiPics при базовом уровне поиска нашёл лишь 2 группы дубликатов, однако установка ползунка на уровень Loose позволила найти уже 7 групп;
• Awesome Duplicate Photo Finder нашёл 7 групп дубликатов;
• Image Comparer также сумел обнаружить 7 групп.

При этом Image Comparer сумел найти изображения, которые пропустили Awesome Duplicate Photo Finder и VisiPics, а те, в свою очередь, восполнили пробелы Image Comparer.

Определяем самую быструю программу для поиска дубликатов фото

В то же время, качество программы ещё зависит и от её скорости. 60+ картинок – это, конечно же, не то, что с чем могут работать пользователи. Поэтому мы провели ещё один тест. На этот раз на скорость. Для этого мы взяли подборку из 4450 самых разных изображений, общий вес которой превысил 2.1 ГБ.

Две программы из этого обзора, увы, в тесте не заняли никакого места. Как выяснилось, Similar Images Finder, за который просят 34 доллара, в бесплатной версии готов зараз обработать не более 200 изображений.

В свою очередь, универсальный поисковик дубликатов Duplicate Remover Free, столкнувшись с каталогом серьёзного размера, более пяти минут интенсивно работал, а потом основательно завис. Остальные программы показали следующее время:

• AntiDupl: 0:39;
• Image Comparer: 1:02 (35 секунд на создание галереи и 27 на поиск);
• VisiPics: 2:37;
• Awesome Duplicate Photo Finder: 3:17.

В итоге в тесте на скорость в лидеры явно выбились Image Comparer и AntiDupl. На обработку нашего архива у них ушло около или же, в случае AntiDupl, меньше минуты.

Заключение

Подведём итоги. Если вам нужно найти не одинаковые, а именно похожие фотографии, отличающиеся, например, подписью или водяным знаком, то лучше остальных с этой задачей справятся Image Comparer, Awesome Duplicate Photo Finder и VisiPics в режиме работы Loose.

В плане скорости обработки многочисленной коллекции изображений безусловные лидеры AntiDupl и Image Comparer.

Наконец, в плане удобства интерфейса нам понравились Image Comparer и VisiPics, с ходу позволяющие визуально оценить все группы дубликатов. В свою очередь, за наглядность сравнения характеристик отдельных дубликатов мы также отметим AntiDupl.

Как жаль, что жесткие диски не резиновые! Хотелось скачать пару-тройку фильмов на выходные да установить на ПК новую игру, но вот досада – свободное место почти закончилось. И освободить его нельзя, ведь на диске хранится только важное и нужное.

Выше нос! Вы можете увеличить объем свободного места на 5-50% без риска потерять ценную информацию. Как? Путем удаления идентичных копий документов, фотографий, аудиозаписей, видео и прочего добра, которого за год работы компьютера скапливается несколько сотен. Итак, как произвести поиск и удаление дубликатов файлов в Windows

К сожалению, встроенный в систему инструмент очистки дисков «не обучен» искать идентичные копии данных, и нам придется обратить свой взор на сторонние приложения. В сегодняшнем обзоре – 5 бесплатных утилит, которые делают эту работу быстро, четко и чисто.

Auslogics Duplicate File Finder

Одно только то, что , заявляет о некотором уровне качества и претендует на доверие пользователей. Программа поддерживает все выпуски Windows, регулярно обновляется, имеет русский язык и очень легко поддается освоению. Для поиска дубликатов она использует особый интеллектуальный алгоритм – сравнивает не только имена, но и внутреннее содержимое файлов, что гарантирует высокую точность результатов.

Функции и возможности Auslogics Duplicate File Finder

• Настройка фильтра по типу объектов: все либо только изображения, аудио, видео, архивы и приложения.
• Исключение из поиска файлов меньше и больше заданного размера.
• Исключение из критериев поиска названий, дат создания/изменения файлов и атрибутов «скрытый».
• Нахождение дубликатов с определенными именами или заданным фрагментом в имени.
• 3 способа удаления дублей: в корзину, безвозвратно и путем сохранения в архив.
• Восстановление данных из архива.
• Предпросмотр объектов перед удалением.
• Поддержка пользовательских списков исключения из сканирования файлов и папок.
• Откат системы на точку восстановления из интерфейса программы.

Использовать Auslogics Duplicate File Finder легко и удобно. К тому же можно не опасаться, что программа уничтожит какие-либо данные без вашего ведома и возможности восстановления (только если вы сами не выбрали опцию удаления мимо корзины). Впечатление портит лишь «ненавязчивое» предложение установить другие продукты разработчика, которое иногда появляется при запуске.

CloneSpy

Утилита предназначена для поиска дублированных файлов не только на жестком диске, но и на переносных накопителях. Она чуть сложнее в применении, чем Auslogics Duplicate File Finder, но более функциональна и способна работать без установки на компьютер – при запуске инсталлятора юзер может выбрать ее стандартный или портабельный вариант.

Функции и возможности CloneSpy

• Поддержка любых типов файлов.
• Поиск дубликатов по идентичному содержимому или одинаковому имени в совокупности с другим критерием – расширением, названием, размером.
• Нахождение объектов нулевой длины.
• Множество вариантов операций с копиями файлов: удаление вручную или автоматически (можно заранее выбрать, какой объект удалять – новый или старый), помещение в определенную папку, формирование списка дубликатов без удаления и прочее.
• Любые операции с найденными дубликатами (в том числе отложенные) при помощи пакетных командных файлов.
• Замена удаленных копий на ярлыки или жесткие ссылки.
• Вычисление контрольных сумм для возможности проверки объектов на идентичность.
• Поддержка пользовательских фильтров поиска.

CloneSpy функционирует быстро и бесперебойно, поддерживает все версии винды, регулярно получает обновления, но не имеет русского языка, что несколько затрудняет его освоение. Кроме того, некоторых пользователей отталкивает интерфейс, выполненный в стиле Windows 98.

Soft4Boost Dup File Finder

Разработчики утилиты позаботились не только о функциональности, но и о красоте своего продукта: к вашим услугам – 11 стильных вариантов оформления (скинов). Кроме того, приложение переведено на 9 языков, включая русский, и имеет интуитивно понятное управление.

Soft4Boost Dup File Finder приступает к делу сразу – при первом запуске на фоне главного окна открывается окошко мастера, который пошагово проведет вас через все этапы настройки. Запутаться и ошибиться не получится.

Функции и возможности Soft4Boost Dup File Finder

• Нахождение копий объектов по содержимому.
• Выбор категории поиска: среди всех файлов или только изображения, аудио, видео, архивы или приложения.
• Опция игнорирования имен объектов.
• Сканирование локальных и сетевых папок, а также съемных носителей (можно выбрать несколько).
• 2 способа удаления: в корзину и безвозвратно.

В отличие от многих «халявных» приложений, которые пытаются окупить свою бесплатность попутной установкой мусора или навязчивой демонстрацией рекламы, Soft4Boost Dup File Finder лишь скромно предлагает купить продукты того же разработчика оптом по 1399 рублей. Если они вам не нужны, просто не нажимайте на банер.

Как и остальные программы сегодняшнего обзора, Soft4Boost Dup File Finder поддерживает все версии Windows и регулярно обновляется.

AllDup

Утилита не столь интуитивна, как предыдущая, зато богата функциями. Не будь в ней русского языка, освоить все возможности за 5 минут смог бы не каждый. Хотя ничего сложного в этой программе нет. При первом запуске вместе с главным окном открывается небольшой подсказчик – окошко «Быстрый старт» с тремя кнопками: «Выбор исходной папки», «Выбор метода поиска» и «Начало поиска». Поочередное нажатие этих кнопок открывает области, где нужно что-либо выбрать или настроить.

Пользователи, владеющие английским, могут осваивать AllDup по материалам встроенной справки, которая открывается в нужном месте при нажатии на значки вопроса.

Функции и возможности AllDup

• Большой перечень критериев поиска: имя, расширение, размер, содержимое, даты создания и изменения, атрибуты файла, жесткие ссылки, похожие изображения. Поиск по сочетанию нескольких критериев.
• Сканирование содержимого архивов (нахождение отдельных дубликатов в архивах).
• Настраиваемый способ сравнения имен объектов: по полному совпадению, по начальным символам в имени, по заданному количеству совпадающих символов и т. д.
• Нахождение файлов с похожими именами.
• Сравнение содержимого файлов.
• Гибкие параметры поиска с возможностью выбора дополнительных действий до и после него.
• Ведение лога сканирования.
• Гибко настраиваемый фильтр игнорирования объектов.
• Создание жесткой ссылки или ярлыка на сохраненный файл на месте удаленного дубликата.
• Отсутствие ограничений на количество сканируемых каталогов.
• Сканирование съемных носителей.
• Предварительный просмотр найденных файлов с отображением различных параметров – на случай затруднения при принятии решения об удалении.
• Составление удобных списков результатов поиска. Экспорт списков в формат txt или csv.
• Сохранение результата сканирования. Позволяет закрывать программу, не дожидаясь окончания проверки. И после повторного запуска начинать не сначала, а с момента остановки.
• Создание и сохранение нескольких профилей настроек.

AllDup отличается от многих конкурентов высокой скоростью сканирования и полнотой обнаружения дублированных объектов. Кстати, благодаря функции поиска похожих файлов программу можно использовать для нахождения каких-либо данных на жестком диске без цели удаления.

Еще одна приятная особенность утилиты AllDup – это полное отсутствие рекламы. Вместо нее на верхнюю панель вынесена кнопка «Поддержать автора» любой приемлемой суммой, если вы захотите этого сами.

DiskBoss

Нельзя полностью отнести к классу программ для удаления дубликатов файлов. Это лишь одна из функций, помимо которой утилита умеет очень и очень многое. DiskBoss – это оптимизатор дискового пространства и усовершенствованный файловый менеджер. Он предназначен для анализа использования накопителей и управления всеми объектами, которые на них находятся.

Функции и возможности DiskBoss

• Исследование дискового пространства с отображением на круговой диаграмме, сколько места занимают те или иные объекты.
• Классификация, сортировка и группировка файлов и папок по множеству критериев, в том числе по правилам пользователя.
• Поиск и очистка дубликатов на рабочих станциях и серверах под управлением Windows. Гибкие критерии поиска.
• Несколько вариантов действий с найденными дубликатами – удаление, архивация, перенос в другое место и т. д.
• Замещение удаленных дубликатов ссылками.
• Сохранение отчетов сканирования и очистки дисков от дублированных данных в форматах html, excel, pdf, txt, csv и xml.
• Отображение результата поиска дубликатов на круговых диаграммах.
• Создание и выполнение автоматических сценариев по очистке дисков.
• Улучшенная система поиска данных на диске.
• Синхронизация данных в указанных каталогах.
• Удаление групп файлов на основе заданных критериев.
• Мониторинг изменений в файловой системе дисков в реальном времени.
• Анализ целостности и прочие операции с файлами.
• Многое другое.

Утилита DiskBoss будет хорошим выбором для тех, кому нужна полная картина содержимого и состояния дисков, а также возможность управлять всеми данными на них, используя ручные и автоматические методы. Приложение выпускается в бесплатной и нескольких платных версиях, причем первая содержит почти всё, что есть в платной версии pro, кроме нескольких инструментов автоматизации.

Пожалуй, единственный недостаток DiskBoss – отсутствие русского языка, но ради такого богатства функций с этим можно смириться. В остальном утилита очень хороша, а для некоторых задач – незаменима.

Конечно, это далеко не исчерпывающий список программ, предназначенных для удаления идентичных копий файлов. Их десятки, а может, и сотни. Однако этого скромного набора достаточно, чтобы удовлетворить потребности 90% пользователей Windows. Надеюсь, что что-то из них пригодится и вам.

Ещё на сайте:

Поиск и удаление дубликатов файлов в Windows с помощью пятерки бесплатных программ обновлено: Август 4, 2018 автором: Johnny Mnemonic

Эта программа поможет вам легко и быстро удалить дубликаты файлов с жесткого диска вашего компьютера. С помощью этого инструмента вы можете очистить ваш компьютер от дубликатов файлов, освободить дисковое пространство и повысить производительность вашего ПК. Duplicate Remover Free - очень простая утилита с интуитивно понятным интерфейсом. Откройте установочный файл, выберите папку, в которую хотите установить программу, и, спустя пару минут, вы уже сможете работать с ней. После запуска программы укажите папку или диск, где вы хотите искать дубликаты, и нажмите кнопку "Пуск". На соседней вкладке вы увидите результаты поиска дубликатов файлов. Вам остается только отметить те из них, которые вам не нужны, и дать программе команду удалить их. Как видите, все очень просто.

Удаление копий файлов, засоряющих жесткий диск

Зачем удалять одинаковые файлы? Эта бесплатная программа будет просто незаменима в том случае, если пользователь интенсивно работает на компьютере или ноутбуке. Например, ее необходимо регулярно использовать, если вы создаете и редактируете большое количество различных документов. При изменении файлов зачастую пользователи сохраняют на всякий случай оригинал документа, а новую версию хранят либо в другой папке, либо под другим именем. Со временем необходимость в первоначальной версии файла отпадает, но, как правило, исходный файл забывают удалить. В результате этого на жестком диске компьютера хранятся многочисленные копии файлов, которые засоряют жесткий диск, вызывают путаницу и занимают немало свободного места на диске. Данная программа, выполняющая поиск клонов, очень быстро найдет все дубли файлов и удалит их.

Автоматическое и безопасное удаление дубликатов

Очень часто пользователи поиск повторяющихся файлов предпочитают выполнять вручную, опасаясь, что программа, выполняющая поиск и удаление дубликатов, автоматически удалит какие-нибудь важные повторяющиеся файлы. Эти опасения напрасны, поскольку данная утилита ничего не может удалить без ведома пользователя. Программа удаляет только те повторяющиеся файлы, которые пользователь сам пометил на удаление. При работе с этой утилитой, выполняющей поиск дублирующихся файлов, важно помнить, что в получаемом отчете выдаются все версии файлов, включая оригинал. Поэтому, помечая файлы на удаление в полученном списке, необходимо как минимум один из них оставлять.

Использование минимума ресурсов ПК

Duplicate Remover Free – лучший софт для поиска и удаления дубликатов еще и потому, что он бесплатный. Версия программы, которую вы можете скачать по ссылке ниже, не требует регистрации и абсолютно бесплатна. Интуитивно понятный интерфейс этой утилиты позволяет работать с ней даже начинающим пользователям ПК. Программа легко устанавливается, занимает мало места на жестком диске и использует минимум системных ресурсов. Данный инструмент подходит для использования на любой версии операционной системы Windows, включая Windows XP, Windows 7, Windows 8, Windows 10.

Доброго времени суток.

Я думаю, что те пользователи, у кого много фотографий, картинок, обоев ни раз сталкивались с тем, что на диске хранятся десятки одинаковых файлов (а еще есть сотни похожих…). А место они могут занимать очень порядочно!

Если самостоятельно искать похожие картинки и удалять их - то не хватит никакого времени и сил (особенно, если коллекция внушительна). По этой причине, решил я испытать одну утилиту на своей небольшой коллекции обоев (около 80 ГБ, около 62000 картинок и фото) и показать результаты (думаю, многим пользователям это было бы интересно). И так…

П оиск похожих изображений в папке

Примечание! Эта процедура несколько отличается от поиска одинаковых файлов (дубликатов). Программе потребуется значительно больше времени чтобы просканировать каждую картинку и сравнить ее с другими для поиска сходных файлов. Но начать эту статью я хочу именно с этого способа. Чуть ниже в статье рассмотрю поиск полных копий картинок (это делается намного быстрее ).

На рис. 1 показана подопытная папка. Самая обычная, на самом обычном жестком диске, в нее скачивалось и загружалось сотни картинок, как собственных, так и с других сайтов. Естественно, со временем эта папка сильно разрослась и ее необходимо было «проредить»…

Image Comparer (утилита для сканирования)

Официальный сайт : http://www.imagecomparer.com/rus/

Небольшая утилита для поиска похожих картинок на компьютере. Помогает сэкономить уйму времени для тех пользователей, которые работают с картинками (фотографов, дизайнеров, любителей коллекционировать обои и т.д.). Поддерживает русский язык, работает во всех популярных ОС Windows: 7, 8, 10 (32/64 bits). Программа платная, но есть целый месяц для тестирования, чтобы убедиться в ее способностях:).

После запуска утилиты перед вами откроется мастер сравнения, который пошагово вас проведет среди всех настроек, которые требуется задать для начала сканирования ваших картинок.

2) У меня на компьютере картинки сохранены в одной папке на одном диске (поэтому две галереи создавать не было смысла…) - значит логичный выбор «Внутри одной группы изображений (галереи) » (думаю, у многих пользователей дела обстоят примерно так же, поэтому можно сразу остановит ьсвой выбор на первом пункте, см. рис. 3).

Рис. 3. Выбор галереи.

3) В этом шаге требуется просто указать папку (папки) с вашими картинками, которые вы будете сканировать и искать среди них похожие картинки.

4) В этом шаге нужно указать, как будет производиться поиск: похожие изображения или только точные копии. Рекомендую выбрать первый вариант, так у вас найдется больше копий картинок, которые вам вряд ли нужны…

5) Последний шаг - указать папку, где будет сохранен результат поиска и анализа. Например, я выбрал рабочий стол (см. рис. 6)…

Рис. 6. Выбор места для сохранения результатов.

6) Далее начинается процесс добавления изображений в галерею и их анализ. Процесс занимает длительное время (в зависимости от количества ваших картинок в папке). Например, в моем случае потребовалось чуть более часа времени…

7) Собственно, после сканирования - вы увидите окно (как на рис. 8), в котором будут показаны картинки с точными дублями и картинки очень похожие друг на друга (например, одно и то же фото с разными разрешениями или сохраненными в разный формат, рис. 7).

Рис. 8. Результаты…

Плюсы использования утилиты:

1. Освобождение места на жестком диске (причем, иногда, значительно. Например, я удалил порядка 5-6 ГБ лишнего фото!);
2. Легкий мастер, который по шагам проведет через все настройки (это большой плюс);
3. Программа не загружает процессор и диск, а поэтому при сканировании можно ее просто свернуть и заниматься своими делами.

Минусы:

1. Относительно длительное время на сканирование и формирование галереи;
2. Не всегда похожие картинки являются похожими (т.е. алгоритм иногда ошибается, и при степени сравнения в 90%, к примеру, часто выдает мало-похожие картинки. Собственно, без ручной «модерации» не обойтись).

П оиск одинаковых картинок на диске (поиск полных дубликатов)

Этот вариант очищения диска более быстр, но он достаточно «груб»: удалить таким способом получиться только точные дубликаты картинок, но если они разного разрешения, немного отличается размер файлов или формат - то данный способ вряд ли поможет. В целом, для регулярной быстрой «прополки» диска - этот способ подойдет лучше, а после него, логично, можно поискать похожие картинки, как было описано выше.

Glary Utilites