Программа для выявления дубликатов фотографий. Поиск и удаление одинаковых файлов
Здравствуйте Друзья! В этой статье мы разберемся как можно осуществить поиск дубликатов файлов на наших компьютерах. Признаюсь, у меня такой проблемы не стоит. Обычно, на моем компьютере три раздела. Первый системный от 50 до 100 ГБ, второй для документов от 100 до 200 ГБ и третий раздел для всего остального. У меня одна папка для фото, одна для музыки и так далее. Все прозрачно. Другое дело компьютер родителей. Жесткий диск разбит там на три части. На 3-ем разделе две или три папки с фотографиями + в каждой папке куча подпапок. На диске D так же в последствии образовалась папка фото. Перебирать все в ручную тяжело и тут нам помогут программы для поиска дубликатов файлов.
Мне не хочется устанавливать отдельную программу для какой-то функции так как функций бывает много (например дефрагментация или тот же поиск одинаковый файлов). Соответственно много программ придется ставить на компьютер . Позиция у меня следующая. Чем меньше устанавливаешь, тем надежнее и стабильнее работает компьютер .
Решения есть. Найти программу, которая практически необходима в обслуживании компьютера (то есть скорее всего будет установлена) и которая бы смогла искать дубли файлов. Искать долго не пришлось. Это уже знакомый и проверенный CCleaner от компании Piriform. Начиная с 4-ой версии в CCleaner прикрутили данную функцию и ниже мы посмотрим как она работает.
Программу, качаем с официального сайта
Устанавливаем.
При первом запуске выйдет окошко приведенное ниже. Если выбрать Да, то при очистке компьютера по умолчанию, возможно, не собьется авторизация на приведенных почтовый cервисах. Нажимаем Да
Переходим, слева, на вкладку Сервис
Нажимаем на кнопку Поиск файлов
Для поиска одинаковых файлов осталось только указать нужные настройки
Настроек не много и разбиты они на три группы:
- Совпадение
- Пропуск
- Место где искать и места исключения
Остановимся на каждой группе подробнее
Совпадение
Можно установить поиск файлов дубликатов по Имени, Размеру, и Дате изменения. Так же можно комбинировать эти критерии устанавливая больше одной галочки. При упорядочивании фото на компьютере родителей первым делом произведу поиск с совпадением по Имени. Скорее всего найдется куча файлов сохраненных в различных местах. Затем, интересен будет поиск с совпадением по Размеру. Так как фото может быть переименовано, но размер не должен измениться.
Как эффективно использовать поиск дублей с включенной галочкой Изменен мне пока не пришло в голову. Если у вас есть варианты отпишитесь пожалуйста в комментариях. Возможно, если вы взяли и дорисовали что то в фото, при этом не поменяв имя. Но, в этом случае, с огромной вероятностью, изменится размер.
Пропуск
Какие файлы необходимо пропустить при поиске дублей. Здесь возможны следующие варианты:
- Байты с размером 0
- Файлы только для чтения
- Размер менее х МБ
- Системные файлы
- Скрытые файлы
Место где искать и места исключения
Здесь с помощью кнопки Добавить на вкладке Включения задаете где искать дубликаты файлов. На вкладке Исключения добавляете места на жестком диске , флешке или на внешнем жестком диске , где не производить поиск.
В принципе все просто. Для сброса настроек нажимаете соответствующую кнопку.
Когда фильтр настроен нажимаете Найти.
Сортировка результатов поиска дубликатов файлов
В результате получается удобная для просмотра таблица с результатами поиска. Причем таблица формируется сразу, при обнаружении какого-либо дубля.
Предполагаемые дубликаты разделены между собой. Единственное, что хотелось бы видеть в этой таблице, сортировка по нажатию на какой-либо столбец.
При нажатии на файле правой кнопкой мышки появляется контекстное меню, которое позволяет удобно отсортировать результаты поиска. Это особенно актуально если результатов много.
Пункт Исключить позволяет убрать все файлы из выбранной вами папки. Например C:\Program Files. Пункт Ограничить оставит в результатах поиска только файлы из выбранной вами папки. Опция Выбрать дубликаты позволяет выбрать все файлы находящиеся в выбранной вами папке. Остальные пункты вроде бы понятны.
Очень полезен пункт Открыть папку. С помощью него можно быстро зайти и посмотреть где находится файл и нет ли там еще одинаковых файлов не попавших в таблицу результатов или отсеявшихся сортировкой.
Осталось вычислить какой из файлов нужно оставить, а остальные удалить воспользовавшись кнопкой справа внизу.
Заключение
Вот так с помощью старой доброй CCleaner собираюсь искать дубликаты файлов на своих и не только компьютерах . Для моих целей функционала программы достаточно. Если вам нужно больше, тогда стоит обратить внимание на DupKiller. Эта бесплатная программа, почитать о ней и скачать ее можно с официального сайта http://dupkiller.com/index_en.html . DupKiller имеет на много более широкие возможности выполнить настройку поиска. Так же там реализован просмотр графических файлов и прослушивание аудио. Интересна возможность задания не точного совпадения файлов, а до определенного уровня (процента).
Благодарю за то, что поделились статьей в социальных сетях. Всего Вам Доброго!
Здравствуйте, уважаемые. Помните, в своём зелёном сайтостроительном детстве (целый год назад) я Вам уже рекомендовал и описывал программу для поиска и удаления одинаковых фотографий ? Так вот, то была отличная программа, но платная (правда решение этой проблеммы можно найти в интернете довольно легко). А вот и ещё программку описывал для того, чтоб найти и удалить дубликаты файлов . Блин, она тоже платная! 😯
Сегодня буду исправляться — опишу Вам бесплатную и быструю программу для поиска и удаления различных копий файлов в компьютере, коих уйма у Вас. Они тихо сидят в уголках и хихикают над Вами увеличивая размер диска, замедляя работу системы (ведь сканирование файлов жизненно необходимо для её нормальной работы и идёт постоянно практически), просто замусоривая компьютер лишним грузом, усложняя процесс дефрагментации …
Дубликаты файлов нужно удалять и мы с Вами сейчас этим займёмся. Естественно, опишу всё пошагово и в картинках, со всеми нюансами. И конечно, дам Вам две версии программы — обычную с официального сайта и портабельную.
Auslogics Duplicate File Finder — бесплатная программа для поиска и удаления дубликатов файлов
Даже не сомневайтесь — дубликаты файлов есть в Вашем любимом компьютере. Природа их появления до сих пор не изучена учёными. С течением времени они растут, как грибы, возникая из ниоткуда… Конечно же это шутка — дубликаты мы создаём сами, даже не замечая этого. Давайте уже избавимся от них. Для начала, естественно надо скачать программу.
Как и обещал, вот Вам две версии — каждый вправе выбрать нужную именно ему, но я очень рекомендую выбрать портабельную. Дело в том, что в стандартной версии Вам втулят (или попытаются) дополнительный тулбар во все браузеры — оно Вам надо? Я например, как ни старался, а словил его всё-таки — еле избавился. (Как? А вот так .)
Скачать Auslogics Duplicate File Finder: 7 Мб
Скачать Auslogics Duplicate File Finder Portable: 6 Мб
Вот, как я устанавливал обычную версию программы…
Установка Auslogics Duplicate File Finder
Да, установка происходит на английском языке, но помните, что мы с Вами не боимся трудностей и всё победим…
А вот и цена бесплатности — уберите галочки обязательно и кто знает, может именно Вам повезёт и тулбар не установится.
Создать иконку на рабочем столе?
Жмём «Finish» и программа для поиска и удаления дубликатов файлов запустится. Дальше всё очень легко и просто. Как видите программа полностью на русском языке.
Выбираем диск на котором будем искать дубликаты файлов или даже отдельную папку…
Выбираем, что именно будем искать, вернее из каких типов файлов будет вестись поиск…
Если Вы не очень разбираетесь в системе — не рекомендую выбирать первый, верхний пункт. Дело в том, что сама система использует много одинаковых файлов и размещает их там, где ей удобнее и быстрее до них добраться — такие дубликаты файлов не то что не рекомендуется удалять, а категорически низя-я-я!!!
Для подстраховки создайте точку восстановления…
Вот мои дубликаты файлов. Это не все — я уже нашёл и удалил более 300 Мб при первом своём знакомстве с программой (скриншоты не делал просто).
Теперь нужно уточнить программе способ удаления дубликатов…
Удобный и быстрый инструмент для меломанов
Этот несложный инструмент будет полезен, прежде всего, меломанам, у которых на жестком диске ПК хранится огромное количество музыкальных композиций. Файлы музыки, как правило, имеют небольшой размер, но, если на жестком диске ПК хранится несколько тысяч таких файлов, то дубликаты музыки могут занимать существенный объем. Очень часто повторяющиеся аудио файлы накапливаются вследствие того, что различные альбомы одного и того же исполнителя содержат несколько одинаковых композиций, либо из-за того, что различные сборники музыки содержат иногда несколько одинаковых песен.
Поиск дубликатов музыки любого формата
Данное приложение позволяет удалять дубликаты практически всех распространенных аудио форматов (*.m4a; *.m4p; *.mp2; *.aac; *.aiff; *.ape; *.au; *.flac; *.mid; *.mp3; *.ogg; *.wav; *.wma; *.mp3pro; *.rm; *.ra и др.), причем, пользователь имеет возможность указать формат музыкальных файлов, среди которых будет производиться поиск дубликатов. Например, можно искать только дубликаты песен в формате мп3, либо только в формате m4p и mp3, и так далее. Утилита позволяет искать не только абсолютно одинаковые дубли музыки, но и похожие музыкальные композиции. Для этого в программе предусмотрен поиск похожих песен по музыкальным тегам. В этом случае будет производиться поиск дубликатов музыкальных композиций с одинаковым названием, с одинаковым исполнителем или с одинаковым названием альбома. При этом можно выбрать либо один из этих критериев, либо несколько, например, дать программе команду искать копии песен одного и того же исполнителя, имеющие одинаковые названия.
Быстрый, бесплатный и эффективный
Если вы ищете лучший бесплатный софт, который поможет вам удалить дубликаты музыки, смело можете использовать Duplicate Music Remover Free. Скачать эту несложную программу можно по ссылке, расположенной под скриншотом. Не следует опасаться, что эта программа удалит что-то нужное без вашего ведома. Утилита удаляет только те файлы, которые вы пометили на удаление в списке найденных дубликатов. Главное не забывать оставлять один экземпляр каждой композиции из этого списка, потому что программа указывает в отчете о найденных дубликатах все экземпляры файла, у которого есть копии на диске. Данный софт подходит для использования на компьютерах с операционной системой Windows, в том числе Windows XP, Windows 7, Windows 8, Windows 10.
Проведение эффективной генеральной уборки на дисковом пространстве компьютера, наряду с использованием программ для автоматической очистки Windows, требует еще выполнения ручной работы по удалению ненужных файлов и файлов-дубликатов. Для отслеживания ненужных файлов предназначены специальные программы – анализаторы дискового пространства, они помогают отфильтровать содержимое дисков компьютера по определенным критериям (в частности, по весу), чтобы пользователь мог принять решение об удалении файлов или их оставлении. Для поиска дубликатов файлов также существует специальный софт – либо в виде отдельных программ или небольших утилит, либо в составе комплексного ПО для чистки и оптимизации Windows. Ниже рассмотрим пятерку программ для поиска дубликатов файлов. В пятерку вошли полностью бесплатные программы с поддержкой русского языка.
При проведении поиска дубликатов файлов на системном диске С лучше указывать не весь раздел целиком, а лишь отдельные папки, где хранятся пользовательские файлы. Дубликаты, обнаруженные в рабочих папках Windows, удалять нельзя. При обнаружении на диске С отдельных увесистых папок или файлов с незнакомыми названиями рекомендуется получить о них справку в Интернете.
1. AllDup
Программа AllDup оснащена множеством различных опций для тонкой настройки поиска дубликатов файлов. В числе настраиваемых опций – выбор метода сравнения, критериев поиска, приоритета проверки дубликатов, задействование исключающих фильтров, включение содержимого архивных файлов и пр. Предусматривается даже смена тем оформления и отдельных настроек интерфейса. Программа хорошая, правда, с несколько непродуманным интерфейсом. На ее панели инструментов все вкладки – хоть основных операций, хоть дополнительных функций – значатся как равнозначные. И чтобы помочь пользователю, впервые запустившему AllDup, освоить специфику программы, ее создатели оснастили интерфейс плавающим виджетом в виде краткого руководства, какой шаг за каким нужно сделать. Во вкладке «Исходные папки» указывается область поиска – разделы диска, подсоединяемые устройства или отдельные пользовательские папки на системном диске С.
Далее во вкладке «Метод поиска» устанавливаются критерии поиска. Здесь поиск дубликатов можно конкретизировать и к предустановленному критерию поиска по именам файлов добавить расширение, размер, содержимое и пр.
Результаты поиска дубликатов можно сортировать по размеру, пути, дате изменения файлов и т.п. Обнаруженные файлы можно удалять, открывать их расположение в проводнике Windows, применять прочие действия, предусматриваемые программой.
Чтобы вернуться к анализу результатов поиска дубликатов, выполненных AllDup, позднее, но не ждать завершения сканирования, текущие результаты можно сохранить в файл формата программы или экспортировать в файлы TXT и CSV.
У программы AllDup есть портативная версия, не требующая установки в систему.
2. Duplicate Cleaner
Еще одна функциональная программа для гибко настраиваемого поиска дубликатов файлов – Duplicate Cleaner. Программа Duplicate Cleaner существует в двух редакциях – в платной Pro и бесплатной Free. Хоть последняя и ограничена недоступностью некоторых функций, ее возможностей будет достаточно для эффективного поиска дубликатов. Duplicate Cleaner Free позволяет задавать критерии поиска по именам, содержанию, размеру, дате создания файлов. Предусматриваются дополнительные критерии поиска по данным аудиофайлов, а также фильтрация по типам контента и расширениям файлов. Все эти моменты настраиваются в первой вкладке программы «Критерии поиска».
Во второй вкладке программы – «Сканировать путь» – выбирается область поиска.
В окне результатов поиска дубликаты можно сортировать, удалять, открывать их расположение в проводнике, а также применять к ним прочие опции программы.
Результаты поиска Duplicate Cleaner могут быть экспортированы в файл формата табличных данных CSV. Экспорт данных осуществляется как для всего перечня дубликатов, так и для только помеченных пользователем файлов. Из преимуществ Duplicate Cleaner – удобный интерфейс и продуманная организация.
3. DupeGuru
DupeGuru – это простейший поисковик дубликатов файлов для тех, у кого нет времени или желания осваивать все тонкости функциональных узкоспециализированных программ типа рассмотренных выше. Внизу небольшого окошка программы выбирается область поиска и запускается сканирование.
Результаты поиска дубликатов могут быть отсортированы по пути размещения и размеру файлов. Контекстное меню результатов поиска DupeGuru содержит лишь необходимые для работы с найденными дубликатами операции.
Результаты поиска сохраняются в файл программы или экспортируются в HTML.
DupeGuru – кроссплатформенная программа, но под Windows адаптированы только ее старые версии. Предлагаемый на официальном сайте инсталлятор программы для Windows 7 подойдет также для версий системы 8.1 и 10.
4. CCleaner
На одном из этапов своего совершенствования популярнейший чистильщик для Windows CCleaner получил функцию поиска дубликатов файлов. Воспользоваться этой функцией можно в разделе «Сервис». Для поиска дубликатов доступны критерии поиска по именам, дате создания, содержимому файлов, их размеру.
Как и предыдущий участник обзора, программа CCleaner в среде результатов поиска дубликатов не особо богата функционалом, но базовые операции присутствуют. Это, в частности, сортировка результатов поиска и удаление файлов.
5. Glary Utilities 5
Комплексная программа для чистки и оптимизации Windows Glary Utilities 5 в числе арсенала содержит утилиту для поиска дубликатов файлов. Эту же утилиту при желании с официального сайта программы можно скачать отдельно, если не требуется всей мощи программного пакета.
Поисковик дубликатов в составе Glary Utilities 5 простенький, но удобный и настраиваемый. Сканирование дубликатов можно запустить сразу, выбрав лишь область поиска – разделы диска, съемные устройства или отдельные папки. А можно конкретизировать поиск, нажав кнопку «Опции».
В опциях настраиваются критерии поиска дубликатов – по именам, по размеру, по времени создания файлов. В отдельных случаях проведения тщательной чистки дискового пространства можно сменить предустановленный выбор поиска лишь среди распространенных типов файлов на сканирование всех типов.
Результаты поиска предусматривают только необходимые операции для работы с дубликатами, в частности, удаление и открытие пути размещения в проводнике Windows.
Для удобства пользователя найденные дубликаты Glary Utilities 5 каталогизирует по типам контента – документам, картинкам, видео, программам и т.п. По каждому типу отображается общий вес найденных файлов.
На сегодняшний день технология создания жестких дисков намного шагнула вперед, предлагая пользователям накопители гигантских размеров — до нескольких тысяч ГБ, среди которых наиболее популярны жесткие диски емкостью от 2 до 4 ТБ.
Единственной проблемой такого изобилия свободного места на компьютере у большинства пользователей является прекращение слежения за объемом хранящихся данных и, в следствие этого, неожиданное переполнение жестких дисков — в этом случае поможет только наведение порядка в файлах и поиск дубликатов файлов.
Благодаря высокой скорости соединения с интернетом загрузка любых файлов уже не проблема и является обыденным делом. Исходя из этого, жесткий диск постепенно заполняется различным контентом: видеоклипами, фильмами различного качества, фотографиями, музыкой, документами и другими данными. Со временем во всех этих файлах становится трудно ориентироваться особенно тогда, когда файлы раскиданы по разным папкам с бессмысленными названиями.
Нередки случаи хранения нескольких копий различных файлов, о которых пользователь может даже не подозревать. Бывает еще такое, что, при редактировании фотографий в графических редакторах, они сохраняют резервную копию оригинального изображения без ведома пользователя — таким может похвалиться программа ACDSee .
Чтобы не допустить переполоха среди файлов и накапливания мусора на жестком диске, необходимо заранее позаботиться о структурированном хранении всех данных на накопителе, а также следует вести список хранящихся файлов, если вы собираете в коллекцию альбомы исполнителей, фильмы определенного жанра и многое другое. Но если вы уже докатились до каламбура в файловой системе, мы подскажем вам как навести порядок в файлах на вашем компьютере.
Существует множество способов и стратегий наведения порядка в файлах на компьютере. В свою очередь мы приведем одну стратегию, которая, на наш взгляд, является самой оптимальной и действенной. И в данной, первой части, публикаций на тему наведения порядка в файлах мы коснемся поиска дубликатов файлов.
WinDirStat.
С помощью бесплатной программы WinDirStat можно с легкостью узнать и проанализировать какие файлы занимают больше всего дискового пространства на жестком диске. Данная утилита предоставляет удобную статистику использования места на жестком диске файлами различного типа.
В нижней части окна программы расположена своеобразная мозаика из разноцветных блоков. Цвет каждого блока зависит от типа файлов, а размер блока — от количества занимаемого места (чем больше блок, тем больше размер файлов данного типа).
Кроме просмотра статистики в программе WinDirStat можно осуществить удаление больших файлов, которые занимают значительную часть дискового пространства.
Скачать WinDirStat можно для компьютеров только с операционной системой Windows.
Auslogics Duplicate File Finder.
Программа Auslogics Duplicate File Finder позволит отыскать на любом носителе информации (например, жесткий диск, флешка, карта памяти) дубликаты файлов и в последующем избавиться от них, удалив прямо из окна программы.
Утилита способна находить копии файлов различных типов: аудио, видео, изображения, архивы и исполняемые файлы.
Программа при поиске дубликатов файлов использует алгоритм MD5, который позволяет находить эти самые копии файлов с разными атрибутами (названия, даты создания и пр.).
Duplicate File Remover.
Duplicate File Remover — еще одна программа, которая предназначена для поиска дубликатов файлов различных типов. Помимо поиска программа может удалить, переместить или скопировать файлы в выбранную категорию по вашему желанию.
Используемый программой Duplicate File Remover алгоритм позволяет находить дубликаты текстовых документов, аудио, видео, изображений и других типов файлов со 100%-й точностью.
Список найденных копий можно отсортировать и экспортировать в HTML-отчет.
Пожалуй, единственным минусом данной утилиты является ее условно-бесплатная лицензия, но, в любом случае, стоит скачать Duplicate File Remover с бесплатным пробным периодом 30 дней.
Кроме представленных выше программ для поиска дубликатов файлов существуют и другие.
Например, Anti-Twin — использует тот же самый побайтовый алгоритм сравнения файлов, что и программа Duplicate File Remover. Позволяет находить копии текстовых документов, аудио и видео файлов, изображений и других типов файлов. По завершению поиска и анализа файлов дубликаты можно удалить прямо из окна программы.
Программа VisiPics заточена специально для поиска изображений. Производит поиск фотографий по содержимому, способна найти одно и то же изображение с разными разрешениями. Процентное отношение степени совпадения файлов можно регулировать вручную.
В свою очередь, программа Similarity создана специально для поиска копий аудиофайлов, сравнивая содержание музыкальных композиций.
Знайте, что избавление от дубликатов файлов имеет только положительные стороны, а именно: освобождение дискового пространства от мусора, повышение производительности компьютера, ускорение дефрагментации файловой системы и уменьшение времени сканирования компьютера на вирусы.
Обращаем внимание на то, что данным программам доверять можно, но не на все 100%. Программа редко, но может, ошибочно посчитать дубликатом совсем не подходящий под эти условия файл, который может оказаться важным для вас. При соответствующем подходе и аккуратном использовании программ для поиска дубликатов файлов эти полезные утилиты станут вашими хорошими помощниками в генеральной уборке файловой системы компьютера.
