Одним из самых быстрых способов забить жесткий диск — хранение дубликатов файлов. Наверняка многие даже не подозревают об их существовании… они могут иметь разное происхождение: случайные копии, множество одинаковых загрузок и так далее. Одно можно сказать точно — они действительно могут создавать вам некоторые проблемы.
Множество дубликатов создаются из-за необходимости держать файл в «безопасности»… например перед редактирование документа я мог сделать копию на всякий случай, а потом забыть… или у меня уже есть такой документ, а я его еще раз скачал из почты. К сожалению таких дублей может быть очень много и получается что вы забиваете свободное место бесполезной информацией.
С помощью этих инструментов вы можете вычислить и удалить дубликаты файлов за считанные минуты и освободить много ценного места на жестком диске. Я буду рассматривать только бесплатные утилиты, поэтому вы ничего не теряете!
Поиск дубликатов файлов. Обзор лучших инструментов
Эта утилита наверное мой фаворит в инструментах для поиска и удаления дубликатов, потому что имеет массу замечательных возможностей: Она является кросс платформенной, полностью бесплатная, а так же имеет продвинутый алгоритм меток и отбора.
Что такое не явные дубли? Несколько одинаковых файла могут иметь разное имя. Например у вас на компьютере может быть два файла: пример-файла.avi и пример файла(1).avi — утилитка это прекрасно понимает и тоже может пометить их как дубликат.
Кстати утилита имеет и другие издания: Music Edition и Picture Edition, оптимизированные для поиска дублей графических и аудио файлах — даже если они записаны в разных форматах. Это очень важно, ведь именно аудио и графические файлы наиболее часто становятся дублями.
Duplicate Files Finder представляет собой приложение, которое осуществляет поиск дублированных файлов (которые имеют одинаковое содержание, но не обязательно с таким же именем) и позволяет удалить пользователю ненужные файлы.
Duplicate Files Finder может находить только точные дубликаты. Принцип ее работы — перебор всех файлов на компьютере по размеру и сравнение их по содержанию. С одной стороны это логично, но это совсем печально для видео и графики (ведь они в зависимости от алгоритма сжатия могут иметь разный размер) , но для всего остального программа просто отличная.
Благодаря такому алгоритму сравнения Duplicate Files Finder работает гораздо быстрее своих конкурентов.
AllDup является мощным инструментов для поиска дубликатов созданный одним человеком, Michael Thummerer. Утилита имеет ряд настроек для поиска дублей из: имени файла, расширения и типа данных, даты создания и изменения и еще много разных параметров.
AllDup имеет много полезных функций и большую гибкость в условиях поиска дубликатов, однако за функционал нужно заплатить. Интерфейс тут совсем не дружелюбный и это может загнать неуверенного пользователя в тупик. Однако если вы сможете разобраться в программе, то это приложение будет хорошим инструментом для поиска повторяющихся файлов.
Duplicate Cleaner требует тонкой ручной настройки, прежде чем вы сможете использовать функционал данной программы на все сто процентов.
При ручной настройке вы можете выбрать в какой папке нужно найти дубли, а не сканировать весь компьютер как предлагают нам некоторые другие программы. В итоге вы можете эти дубли удалить, переместить их все в отдельную папку или вместо них создать ярлыки на единственный нужный файл. В целом впечатления положительные — так что рекомендую.
Если вы пользователь Windows, и хотите избавиться от бесконечных копий изображений, то SimilarImages будет вам как никогда кстати. Изображения на мой взгляд самый частый источник дублированного контента на компьютере. Я например знаю что у меня есть куча дублирующихся фотографий в разных папках… а учитывая их количество разбираться с ними вручную у меня нет никакого желания.
Программа имеет гибкие настройки и может обнаруживать неточные дубликаты — это особенно актуально из-за присутствия артефактов появившимся в процессе сжатия изображения.
Самое замечательное в SimilarImages — она показывает вам два изображения когда находит дубли, и вы можете сделать вывод — оставить их или удалить дубль.
Заключение
Все как в реальной жизни, когда ненужное барахло создает ужасный беспорядок в вашем доме, так и дубликаты файлов могут накапливаться на вашем жестком диске. Такие файлы очень трудно удалить, потому что вы о нем забыли, а обычные программы для очистки системы не найдут их — так как они обосновалить на винчестере на вполне законных основаниях.
Используйте программы которые я вам перечислил для поиска дубликатов файлов чтобы освободить место на вашем жестком диске. Если вы знаете о других утилитах — поделитесь с нами в комментариях.
Вконтакте
После постоянного пользования компьютером, на его дисках накапливаются большие объёмы данных, т. е. всякие фотографии, видео, фильмы, музыка, документы и прочее. Эти данные занимают много места. Но очень часто слишком много места занимают дубликаты файлов.
В Windows, к сожалению, нет нормальных встроенных средств для поиска дубликатов файлов. Есть вариант сделать это через командную строку PowerShell, но это очень неудобно, тем более для новичков будет сложновато. Поэтому проще воспользоваться сторонними программами. Одна из таких называется AllDup. Она полностью бесплатная, доступна на русском языке, поддерживается всеми операционными системами Windows и, наконец, довольно проста в использовании.
Загрузка и установка программы AllDup
Программу можно загрузить бесплатно с официального сайта AllDup. Ниже ссылка на раздел загрузки:
Программа доступна в 2-х вариантах: обычном установочном и портативном (Portable). Портативный отличается тем, что не требует установки на компьютер, т. е. программу можно будет запускать прямо из скачанной папки.
Для загрузки нажмите кнопку «Server #1», либо «Server #2» или «Server #3» (если по первой кнопке загрузки не происходит, даны запасные серверы) под нужной версией программы.
За свежими версиями всегда обращайтесь к официальному сайту AllDup!
Установка программы очень проста, можно сказать состоит из последовательных нажатий «Далее», никаких специальных настроек производить не нужно. Поэтому данный процесс рассмотрен не будет. Смотрите также Как отключить или удалить OneDrive в Windows 10 и .
Поиск дубликатов при помощи AllDup
После того как установили программу, запустите её. Откроется главное окно для настроек поиска:
Настройка поиска включает в себя несколько этапов:
Имя файла;
Расширение файла;
Размер файла;
Содержимое файла.
Выбор папок на ваших дисках, где программа AllDup будет искать дубликаты.
Папки выбираются в разделе «Исходные папки». Вы можете отметить как целые локальные диски, так и отдельные папки на вашем компьютере. Обычно пользователи примерно предполагают, где могут располагаться дубликаты и в этом случае лучше выбрать конкретные папки, потому что поиск целиком по всем дискам, во-первых, может занять много времени (зависит от объёма хранящихся данных), а во-вторых, выдаст вам кучу дубликатов тех файлов, которые вам не интересуют (например, дубли всяких системных файлов Windows, которые лучше вообще не трогать).
Итак, выберите в окне нужные папки / диски для поиска, поставив напротив них галочки. Если нужной папки нет в списке, вы можете добавить её вручную, нажав правой кнопкой мыши (далее «ПКМ») в окне и выбрав «Добавить папку».
Откроется проводник, где вам осталось выбрать нужную папку и она будет добавлена в список.
Остальные параметры на данном этапе лучше оставить как есть. Смотрите также Способы взлома Ваших паролей и Ограничение времени работы в Windows 10 .
Метод поиска дублей.
Это важный этап, где вы настраиваете, по каким критериям AllDup будет определять наличие дублей. Можно задать сразу несколько критериев. Всё дело в том, что ведь не всегда схожие файлы могут считаться дублями. Например, у вас 2 одинаковых фотографии, но на одной из них стоит мелкая чёрная точка, пусть даже размером в 1 пиксель. В этом случае это уже другая фотография, потому что отличается её содержимое. С другой стороны у этих 2-х фотографий может быть одинаковое имя файлы, одинаковое расширение файлы и при выборе последних 3-х критериев, программа при поиске расценит эти фотки как одинаковые.
При таком выборе, вы наверняка безошибочно найдёте действительно файлы-дубликаты.
Таким образом отметьте критерии и больше на данном этапе можно ничего не настраивать.
Фильтрация файлов.
Вы можете настроить программу так, чтобы она в ходе поиска находила только файлы с нужными вам расширениями, например, только фотографии JPG, только видео MP4. Это очень удобно, когда вы знаете, от каких дубликатов хотите прежде всего избавиться (например, от видео, потому что оно много места может занимать) и не хотите потом в результатах поиска перерывать все подряд файлы, коих может насчитываться тысячами. Или можете отсеивать файлы по размеру, к примеру, находить только те, размер которых более 1 Гб.
Таким образом, на вкладке «Фильтр файлов» включите опцию «Использовать фильтр файлов» (1), отметьте «Включительно» (2), после чего ниже (3) выберите расширения файлов, которые программа будет находить. Файлы любых других расширений не будут выведены в результатах поиска.
Скорее всего в списке расширений будут не все, которые могут вам понадобиться. Чтобы добавить туда расширение, щёлкните ПКМ и выберите «Добавить фильтр путём ввода текста».
В открывшемся окне (1) введите *.расширение_файла, где вместо «расширение_файла», соответственно, укажите нужное вам расширение файла, чтобы программа эти файлы находила в поиске.
Например, если хотите, чтобы программа находила видео формата AVI, пишите, *.avi и нажимаете «ОК» (2). Символ «*» означает, что названия файлов могут быть любыми.
На этом же этапе вы можете настроить фильтрацию файлов в результате поиска по их размеру, например, чтобы отсеивались те, которые меньше заданного вами размера. Укажите нужные параметры внизу, под заголовком «Размер файла». В моём примере включена опция, исключающая файлы, размер которых меньше 500 Кб. Также Вам будет интересно Средство записи действий пользователя при возникновении неполадок и Не запускается компьютер и ноутбук на Windows 10. Как исправить? .
Это все основные этапы настройки поиска, остальные можно не задействовать.
Теперь, для запуска поиска дубликатов, нажмите кнопку «Поиск» вверху окна AllDup:
Начнётся процесс поиска.
Чем больше файлов в указанных вами папках находится на ваших дисках, тем дольше будет идти поиск.
После того как поиск будет завершён, программа в виде таблицы отобразит найденные файлы с дубликатами.
Первое, что лучше сделать сразу — сохранить результаты поиска, потому что если вы сейчас закроете это окно с результатами, то потом поиск придётся выполнять заново. Для сохранения нажмите кнопку с изображением дискеты, либо выберите в верхнем меню «Результат поиска» и нажмите «Сохранить результат поиска».
Теперь, даже если вы выключите компьютер, запустив потом программу снова, вы сможете вновь добраться до результатов поиска.
Результаты поиска вы можете отсортировать по разным параметрам, кликая по заголовкам столбцом в таблице. Наиболее полезный, на мой взгляд, критерий для сортировки — размер файлов. Поэтому, если хотите чтобы вверху таблицы отображались самые большие найденные файлы, то кликните по столбцу «Размер (Байт)».
Следующее, что лучше настроить для удобства просмотра результатов — отображаемый размер. Изначально размер файлов программа показывает в байтах, что не очень удобно. Лучше выставить отображение в мегабайтах или даже гигабайтах. Для этого нажмите кнопку, отмеченную на скриншоте ниже (1), после чего отметьте один из вариантов (2):
Теперь остановлюсь на том, как, собственно, пользоваться результатами поиска, как посмотреть и удалить ненужные дубликаты…
Найденные дубликаты программа делит на так называемые группы. Одна группа — это все найденные копии одного и того же файла, включая оригинал (он тоже будет отображаться в этой группе).
Чтобы посмотреть дубликаты одной из групп, нужно её открыть, кликнув по стрелочке. Пример:
Раскрыв определённую группу, вы можете проверить, что это за файл, открыв его. Для этого просто дважды кликните по файлу в группе, либо нажмите ПКМ и выберите «Открыть файл». Файл будет открыт через стандартную программу Windows, через которую у вас обычно открываются все файлы выбранного типа.
Чтобы удалить дубликаты, отметьте их галочкой, щёлкните ПКМ и выберите один из вариантов: удаление файла в корзину Windows, либо безвозвратное удаление.
Соответственно, не удаляйте все файлы из группы, потому что так вы удалите и дубликаты и оригинал сразу! Например, если в группе 3 файла, то удалив сразу 3, вы удалите и оригинал и 2 дубликата. В этом случае, чтобы сохранить только одну единственную копию файла, вам нужно удалить 2 файла из группы.
Таким образом вы можете проверять отдельно каждую группу и удалять дубликаты. Но если информации найдено очень много, можно сделать проще. Сделать так, чтобы программа автоматически выбрала в каждой группе все файлы, кроме одного (т. е. только дубликаты), после чего вы можете разом избавиться от всех дубликатов или перед этим пробежаться и перепроверить, точно ли всё отмеченное подлежит удалению.
Чтобы автоматически отметить дубликаты, зайдите в меню «Выбор» (1) и отметьте включите там один из вариантов (2), например, «Выбрать все файлы, за исключением первого файла».
В результате программа в каждой группе выделит 2 дубликата, а первый в списке файл оставит не выбранным. Т.е. таким образом вы отметите 2 дубликата, а оригинал останется не отмеченным. Или же можете через меню «Выбор» попробовать другие опции, удобные вам.
После того как программа отметила файлы, вы можете перепроверить выбор, если требуется. А чтобы быстро всё ненужное удалить или выполнить какое-то другое действие, нажмите кнопку, отмеченную на скриншоте ниже:
В открывшемся окне вы увидите общий объём выбранных файлов, т. е. сколько места занимают найденные дубликаты и количество выбранных файлов. Внизу вам нужно выбрать действие над выбранными файлами. Вы можете удалить файлы через корзину, удалить безвозвратно (пункт «Удаление файлов»), скопировать или переместить файлы в какую-либо папку, а также переименовать найденные дубликаты. Если вы уверены в том, что отмеченные файлы являются дубликатами и больше вам не нужны, то проще их удалить, но в любом случае, выбор за вами.
Итак, выберите нужное действие (1) и нажмите «ОК» (2). Больше здесь можно ничего не настраивать.
После этого программа произведёт выбранное вами действие над отмеченными ранее файлами!
Вот в общем то и весь процесс:) Чтобы выйти из результатов поиска, просто закройте это окно. Если вы сохранили результаты поиска, то затем, если вам снова потребуется этот результат, вы можете добраться до него через раздел «Результат поиска» (1) в главном окне программы. Сохранённые вами результаты будут отображены в таблице (2). Чтобы открыть нужный результат просто кликните по нему дважды.
Заключение
AllDup - очень удобная программа для поиска дубликатов ваших файлов на компьютере. В программе нет по сути ничего лишнего, в ней есть все нужные инструменты, фильтры и параметры для быстрой обработки большого объёма найденных дубликатов. Конечно, есть и аналогичные программы, которые, наверняка, тоже хорошо справляются со своей задачей. Я пробовал пока что только AllDup и менять её пока не вижу никакого смысла.
Здравствуйте Друзья! В этой статье мы разберемся как можно осуществить поиск дубликатов файлов на наших компьютерах. Признаюсь, у меня такой проблемы не стоит. Обычно, на моем компьютере три раздела. Первый системный от 50 до 100 ГБ, второй для документов от 100 до 200 ГБ и третий раздел для всего остального. У меня одна папка для фото, одна для музыки и так далее. Все прозрачно. Другое дело компьютер родителей. Жесткий диск разбит там на три части. На 3-ем разделе две или три папки с фотографиями + в каждой папке куча подпапок. На диске D так же в последствии образовалась папка фото. Перебирать все в ручную тяжело и тут нам помогут программы для поиска дубликатов файлов.
Мне не хочется устанавливать отдельную программу для какой-то функции так как функций бывает много (например дефрагментация или тот же поиск одинаковый файлов). Соответственно много программ придется ставить на компьютер . Позиция у меня следующая. Чем меньше устанавливаешь, тем надежнее и стабильнее работает компьютер .
Решения есть. Найти программу, которая практически необходима в обслуживании компьютера (то есть скорее всего будет установлена) и которая бы смогла искать дубли файлов. Искать долго не пришлось. Это уже знакомый и проверенный CCleaner от компании Piriform. Начиная с 4-ой версии в CCleaner прикрутили данную функцию и ниже мы посмотрим как она работает.
Программу, качаем с официального сайта
Устанавливаем.
При первом запуске выйдет окошко приведенное ниже. Если выбрать Да, то при очистке компьютера по умолчанию, возможно, не собьется авторизация на приведенных почтовый cервисах. Нажимаем Да
Переходим, слева, на вкладку Сервис
Нажимаем на кнопку Поиск файлов
Для поиска одинаковых файлов осталось только указать нужные настройки
Настроек не много и разбиты они на три группы:
- Совпадение
- Пропуск
- Место где искать и места исключения
Остановимся на каждой группе подробнее
Совпадение
Можно установить поиск файлов дубликатов по Имени, Размеру, и Дате изменения. Так же можно комбинировать эти критерии устанавливая больше одной галочки. При упорядочивании фото на компьютере родителей первым делом произведу поиск с совпадением по Имени. Скорее всего найдется куча файлов сохраненных в различных местах. Затем, интересен будет поиск с совпадением по Размеру. Так как фото может быть переименовано, но размер не должен измениться.
Как эффективно использовать поиск дублей с включенной галочкой Изменен мне пока не пришло в голову. Если у вас есть варианты отпишитесь пожалуйста в комментариях. Возможно, если вы взяли и дорисовали что то в фото, при этом не поменяв имя. Но, в этом случае, с огромной вероятностью, изменится размер.
Пропуск
Какие файлы необходимо пропустить при поиске дублей. Здесь возможны следующие варианты:
- Байты с размером 0
- Файлы только для чтения
- Размер менее х МБ
- Системные файлы
- Скрытые файлы
Место где искать и места исключения
Здесь с помощью кнопки Добавить на вкладке Включения задаете где искать дубликаты файлов. На вкладке Исключения добавляете места на жестком диске , флешке или на внешнем жестком диске , где не производить поиск.
В принципе все просто. Для сброса настроек нажимаете соответствующую кнопку.
Когда фильтр настроен нажимаете Найти.
Сортировка результатов поиска дубликатов файлов
В результате получается удобная для просмотра таблица с результатами поиска. Причем таблица формируется сразу, при обнаружении какого-либо дубля.
Предполагаемые дубликаты разделены между собой. Единственное, что хотелось бы видеть в этой таблице, сортировка по нажатию на какой-либо столбец.
При нажатии на файле правой кнопкой мышки появляется контекстное меню, которое позволяет удобно отсортировать результаты поиска. Это особенно актуально если результатов много.
Пункт Исключить позволяет убрать все файлы из выбранной вами папки. Например C:\Program Files. Пункт Ограничить оставит в результатах поиска только файлы из выбранной вами папки. Опция Выбрать дубликаты позволяет выбрать все файлы находящиеся в выбранной вами папке. Остальные пункты вроде бы понятны.
Очень полезен пункт Открыть папку. С помощью него можно быстро зайти и посмотреть где находится файл и нет ли там еще одинаковых файлов не попавших в таблицу результатов или отсеявшихся сортировкой.
Осталось вычислить какой из файлов нужно оставить, а остальные удалить воспользовавшись кнопкой справа внизу.
Заключение
Вот так с помощью старой доброй CCleaner собираюсь искать дубликаты файлов на своих и не только компьютерах . Для моих целей функционала программы достаточно. Если вам нужно больше, тогда стоит обратить внимание на DupKiller. Эта бесплатная программа, почитать о ней и скачать ее можно с официального сайта http://dupkiller.com/index_en.html . DupKiller имеет на много более широкие возможности выполнить настройку поиска. Так же там реализован просмотр графических файлов и прослушивание аудио. Интересна возможность задания не точного совпадения файлов, а до определенного уровня (процента).
Благодарю за то, что поделились статьей в социальных сетях. Всего Вам Доброго!
Вспомогательная утилита CCleaner – это достаточно популярное приложение, которое помогает очистить устройство от различных ненужных файлов. Скачивается она совершенно бесплатно на официальном ресурсе. Пользоваться данной программкой очень легко и это сможет сделать даже неопытный пользователь.
Отдельным плюсом хочется выделить то, что начиная с четвертой версии, данная программка может искать файлы-дубликаты. Функция весьма полезная, так как удаление дублирующей информации может помочь очистить системный диск и укорить работу устройства в целом. Поэтому обратите внимание, какая версия программы загружена на ПК, если более старая, то просто обновите ее до актуальной.
Можно ли удалять файлы дубликаты в CCleaner, и как это сделать
- Скачиваем и устанавливаем приложение. Загрузку лучше всего производить с официального ресурса, так как это наиболее надежный способ избежать попадания на ПК вирусов и подозрительного ПО.
- Запускаем программку в работу и переходим в меню «Сервис».
- Выбираем строку «Поиск Дублей».
- В основном окне можно задать различные критерии для осуществления поиска. Это делается путем установки отметок рядом с пунктами разделов «Совпадение», «Пропуск» и «Включения»/ «Исключения».
- Кнопочка «Добавить»
поможет выполнить поиск в какой-то определенной директории (папке) на диске. После ее нажатия откроется окошко, где можно осуществить выбор папки с помощью кнопочки «Обзор»
. В этом же окне можно указать определенный вид расширений для файлов.
- На вкладочке «Исключения»
можно указать те папки, которые ни в коем случае не должны быть затронуты при поиске дублей.
- После того, как параметры просмотрены и установлены кликаем на кнопочку «Найти».
- После автоматического поиска в основном окне можно будет увидеть результаты.
- В отчете можно будет прочесть имена файлов и адреса, по которым они располагаются на устройстве.
- Отчет можно сохранить в текстовом формате в любую удобную папку. Это можно сделать нажатием кнопочки «Сохранить отчет…».
- Файлы располагаются попарно (оригинал и дубликат). Выделяем те, что необходимо удалить. Для выделения проставляем отметки напротив имени. Если нет уверенности в том, что файл не несет никакой важной информации и его можно удалять, то лучше его не трогать. В этом случае нужно сохранить отчет и просмотреть сомнительные файлы отдельно.
- Затем, кликаем на кнопочку «Удалить выбранные».
После автоматического удаления можно будет убедиться в том, что файлов-дубликатов действительно больше не существует и места на диске стало больше.
