Как найти повторы файлов

После долгого, постоянного пользования компьютером, на его дисках, как ни крути, накапливаются большие объёмы данных, т. е. всякие фотографии, видео, фильмы, музыка, документы и прочее. Когда данные занимают много места — это нормально, к примеру, у меня самого нужных данных более чем на 600 Гб, а в кого-то ещё больше. Но очень часто слишком много места занимают дубликаты файлов.

Такие файлы могут появляться, когда вы, к примеру, переносите их откуда-то в новое место на диске, забывая, что у вас уже такие файлы на этом диске имеются. И ладно если навалом дубликатов всяких документов, но когда много дубликатов фоток, музыки и особенно видео, то это, как правило, отнимет у вас прилично места на диске. Недавно проверял и обнаружил, что дубликаты съедают у меня порядка 100 Гб. на жёстком диске, что, на мой взгляд, весьма много

В данной статье я покажу вам простой способ найти все дубликаты файлов в Windows на ваших дисках, чтобы вы могли легко проверить их и быстренько удалить всё ненужное.

В Windows, к сожалению, нет нормальных встроенных средств для поиска дубликатов файлов. Есть вариант сделать это через командную строку PowerShell, но это очень неудобно, тем более для новичков будет сложновато. Поэтому проще воспользоваться сторонними программами. Одна из таких называется AllDup. Она полностью бесплатная, доступна на русском языке, поддерживается всеми операционными системами Windows и, наконец, довольно проста в использовании.

Загрузка и установка программы AllDup

Программу можно загрузить бесплатно с официального сайта AllDup. Ниже ссылка на раздел загрузки:

Открыть официальный сайт AllDup

Программа доступна в двух вариантах: обычном установочном и портативном (Portable). Портативный отличается тем, что не требует установки на компьютер, т. е. программу можно будет запускать прямо из скачанной папки.

Для скачивания нажмите кнопку «Server #1», либо «Server #2» или «Server #3» (если по первой кнопке скачивания не происходит, даны запасные серверы) под нужной версией программы.

Прямые ссылки на скачивание последней на сегодняшний день версии (март 2017) AllDup: стандартная версия, портативная версия. За свежими версиями всегда обращайтесь к официальному сайту AllDup!

Установка программы очень проста, можно сказать, состоит из последовательных нажатий «Далее», никаких специальных настроек производить не нужно. Поэтому данный процесс я рассматривать не буду.

Подробнее о нюансах установки программ для Windows рассказано здесь »

Поиск дубликатов при помощи AllDup

После того как установите программу, запустите её. Откроется главное окно для настроек поиска:

Настройка поиска включает в себя несколько этапов:

1. Выбор папок на ваших дисках, где программа AllDup будет искать дубликаты.

   Папки выбираются в разделе «Исходные папки». Вы можете отметить как целые локальные диски, так и отдельные папки на вашем компьютере. Обычно пользователи примерно предполагают, где могут располагаться дубликаты и в этом случае лучше выбрать конкретные папки, потому что поиск целиком по всем дискам, во-первых, может занять много времени (зависит от объёма хранящихся данных), а во-вторых, выдаст вам кучу дубликатов тех файлов, которые вам не интересуют (например, дубли всяких системных файлов Windows, которые лучше, вообще, не трогать).

   Итак, выберите в окне нужные папки / диски для поиска, поставив напротив них галочки. Если нужной папки нет в списке, вы можете добавить её вручную, нажав правой кнопкой мыши (далее «ПКМ») в окне и выбрав «Добавить папку».

   
   

   Откроется проводник, где вам осталось выбрать нужную папку и она будет добавлена в список.

   Остальные параметры на данном этапе лучше оставить как есть.

2. Метод поиска дублей.

   Это важный этап, где вы настраиваете, по каким критериям AllDup будет определять наличие дублей. Можно задать сразу несколько критериев. Всё дело в том, что ведь не всегда схожие файлы могут считаться дублями. Например, у вас 2 одинаковых фотографии, но на одной из них стоит мелкая чёрная точка, пусть даже размером в 1 пиксель. В этом случае это уже другая фотография, потому что отличается её содержимое. С другой стороны, у этих 2-х фотографий может быть одинаковое имя файлы, одинаковое расширение файлы и при выборе последних трёх критериев, программа при поиске расценит эти фотки как одинаковые.

   Поэтому я рекомендую выбрать сразу несколько критериев, например:

   • Имя файла;

   • Расширение файла;

   • Размер файла;

   • Содержимое файла.

   При таком выборе, вы наверняка безошибочно найдёте действительно файлы-дубликаты.

   Таким образом, отметьте критерии и больше на данном этапе можно ничего не настраивать.

   
   

3. Фильтрация файлов.

   Вы можете настроить программу так, чтобы она в ходе поиска находила только файлы с нужными вам расширениями, например, только фотографии JPG, только видео MP4. Это очень удобно, когда вы знаете, от каких дубликатов хотите прежде всего избавиться (например, от видео, потому что оно много места может занимать) и не хотите потом в результатах поиска перерывать все подряд файлы, коих может насчитываться тысячами. Или можете отсеивать файлы по размеру, к примеру, находить только те, размер которых более 1 Гб.

   Таким образом, на вкладке «Фильтр файлов» включите опцию «Использовать фильтр файлов» (1), отметьте «Включительно» (2), после чего ниже (3) выберите расширения файлов, которые программа будет находить. Файлы любых других расширений не будут выведены в результатах поиска.

   
   

   Скорее всего, в списке расширений будут не все, которые могут вам понадобиться. Чтобы добавить туда расширение, щёлкните ПКМ и выберите «Добавить фильтр путём ввода текста».

   
   

   В открывшемся окне (1) введите *.расширение_файла, где вместо «расширение_файла», соответственно, укажите нужное вам расширение файла, чтобы программа эти файлы находила в поиске.

   
   

   Например, если хотите, чтобы программа находила видеоформата AVI, пишите, *.avi и нажимаете «ОК» (2). Символ «*» означает, что названия файлов могут быть любыми.

   На этом же этапе вы можете настроить фильтрацию файлов в результате поиска по их размеру, например, чтобы отсеивались те, что меньше заданного вами размера. Укажите нужные параметры внизу, под заголовком «Размер файла». В моём примере включена опция, исключающая файлы, размер которых меньше 500 Кб.

   
   

Это все основные этапы настройки поиска, остальные можно не задействовать.

Теперь, для запуска поиска дубликатов, нажмите кнопку «Поиск» вверху окна AllDup:

Начнётся процесс поиска.

Чем больше файлов в указанных вами папках находится на ваших дисках, тем дольше будет идти поиск.

После того как поиск будет завершён, программа в виде таблицы отобразит найденные файлы с дубликатами.

Первое, что лучше сделать сразу — сохранить результаты поиска, потому что если вы сейчас закроете это окно с результатами, то потом поиск придётся выполнять заново. Для сохранения нажмите кнопку с изображением дискеты, либо выберите в верхнем меню «Результат поиска» и нажмите «Сохранить результат поиска».

Теперь, даже если вы выключите компьютер, запустив потом программу снова, вы сможете вновь добраться до результатов поиска.

Результаты поиска вы можете отсортировать по разным параметрам, кликая по заголовкам столбцом в таблице. Наиболее полезный, на мой взгляд, критерий для сортировки — размер файлов. Поэтому, если хотите чтобы вверху таблицы отображались самые большие найденные файлы, то кликните по столбцу «Размер (Байт)».

Следующее, что лучше настроить для удобства просмотра результатов — отображаемый размер. Изначально размер файлов программа показывает в байтах, что не очень удобно. Лучше выставить отображение в мегабайтах или даже гигабайтах. Для этого нажмите кнопку, отмеченную на скриншоте ниже (1), после чего отметьте один из вариантов (2):

Теперь остановлюсь на том, как, собственно, пользоваться результатами поиска, как посмотреть и удалить ненужные дубликаты…

Найденные дубликаты программа делит на так называемые группы. Одна группа — это все найденные копии одного и того же файла, включая оригинал (он тоже будет отображаться в этой группе).

Чтобы посмотреть дубликаты одной из групп, нужно её открыть, кликнув по стрелочке. Пример:

Раскрыв определённую группу, вы можете проверить, что это за файл, открыв его. Для этого просто дважды кликните по файлу в группе либо нажмите ПКМ и выберите «Открыть файл». Файл будет открыт через стандартную программу Windows, через которую у вас обычно открываются все файлы выбранного типа.

Чтобы удалить дубликаты, отметьте их галочкой, щёлкните ПКМ и выберите один из вариантов: удаление файла в корзину Windows либо безвозвратное удаление.

Соответственно, не удаляйте все файлы из группы, потому что так вы удалите и дубликаты и оригинал сразу! Например, если в группе 3 файла, то удалив сразу 3, вы удалите и оригинал и 2 дубликата. В этом случае, чтобы сохранить только единственную копию файла, вам нужно удалить 2 файла из группы.

Таким образом, вы можете проверять отдельно каждую группу и удалять дубликаты. Но если информации найдено очень много, можно сделать проще. Сделать так, чтобы программа автоматически выбрала в каждой группе все файлы, кроме одного (т. е. только дубликаты), после чего вы можете разом избавиться от всех дубликатов или перед этим пробежаться и перепроверить, точно ли всё отмеченное подлежит удалению.

Чтобы автоматически отметить дубликаты, зайдите в меню «Выбор» (1) и отметьте включите там один из вариантов (2), например, «Выбрать все файлы, за исключением первого файла».

В результате программа в каждой группе выделит 2 дубликата, а первый в списке файл оставит не выбранным. То есть, таким образом, вы отметите 2 дубликата, а оригинал останется не отмеченным. Или же можете через меню «Выбор» попробовать другие опции, удобные вам.

После того как программа отметила файлы, вы можете перепроверить выбор, если требуется. А чтобы быстро всё ненужное удалить или выполнить какое-то другое действие, нажмите кнопку, отмеченную на скриншоте ниже:

В открывшемся окне вы увидите общий объём выбранных файлов, т. е. сколько места занимают найденные дубликаты и количество выбранных файлов. Внизу вам нужно выбрать действие над выбранными файлами. Вы можете удалить файлы через корзину, удалить безвозвратно (пункт «Удаление файлов»), скопировать или переместить файлы в какую-либо папку, а также переименовать найденные дубликаты. Если вы уверены в том, что отмеченные файлы являются дубликатами и больше вам не нужны, то проще их удалить, но в любом случае выбор за вами.

Итак, выберите нужное действие (1) и нажмите «ОК» (2). Больше здесь можно ничего не настраивать.

После этого программа произведёт выбранное вами действие над отмеченными ранее файлами!

Вот и весь процесс Чтобы выйти из результатов поиска просто закройте это окно. Если вы сохранили результаты поиска, то затем, если вам снова потребуется этот результат, вы можете добраться до него через раздел «Результат поиска» (1) в главном окне программы. Сохранённые вами результаты будут отображены в таблице (2). Чтобы открыть нужный результат просто кликните по нему дважды.

Заключение

AllDup – очень удобная программа для поиска дубликатов ваших файлов на компьютере. В программе нет, по сути, ничего лишнего, в ней есть все нужные инструменты, фильтры и параметры для быстрой обработки большого объёма найденных дубликатов. Конечно, есть и аналогичные программы, которые наверняка тоже хорошо справляются со своей задачей. Я пробовал пока что только AllDup и менять её пока не вижу никакого смысла.

Даже обладатели самых объёмистых тяжелых дисков сталкиваются с нехваткой памяти. Чаще всего для освобождения места пользователи удаляют программы, которые в настоящий момент не используются, но могут оказаться необходимыми в дальнейшем.

Мало кто задумывается о том, что весомый процент памяти компьютера занимают дубликаты файлов. О том, что это и как от них избавиться, и пойдёт речь в этой статье.

Что такое дубликаты как их найти

Дубликат – это копия уже имеющегося документа. На компьютере и цифровых носителях дубликатами по большей части выступают пользовательские данные. Архивы, игры, видео или фотографии иногда легче еще раз скачать из интернета, чем искать на компьютере.

Кажется, что несколько файлов не существенно заполняют память, но со временем пара фотографий превращается в гигабайты занятого места, что может негативно влиять на работу операционной системы.

Внимание! Операционная система Windows содержит системные файлы, сохранённые в нескольких экземплярах. Такие файлы, хоть они и являются дублями, удалять ни в коем случае нельзя!

Дублируемые файлы есть на компьютере у каждого. Где-то они занимают немного места, в то время как у другого пользователя могут значительно засорять жесткий диск. Обнаружить такие файлы можно как самостоятельно, так и с помощью сторонних программ.

Как удалить повторяющуюся информацию в папках с компьютера

Регулярное удаление дубликатов, увеличивает место на дисках и помогает оптимизировать работу компьютера.

Удалить дубли с компьютера можно несколькими способами:

• Самостоятельно просматривая каждую папку. Несомненно, это худший вариант, так как процесс долгий и кропотливый, а в результате можно многое пропустить.
• С помощью командной строки. Встроенных средств для поиска дубликатов у Windows нет, но можно воспользоваться командной строкой PowerShell.На её основе прописаны сотни скриптов, среди которых есть и скрипты по удалению дублей. Опытные пользователи могут прописать их и сами, в том числе настроив таким образом, чтобы не удалять файлы сразу, а только отобразить список. Однако такой способ не подойдёт для новичков.
• Воспользоваться программой. В интернете огромное количество специальных приложений для поиска и удаления дубликатов.Они отличаются методом поиска, например по названию, размеру или содержанию файла. Многообразие же позволяет выбрать подходящий конкретному пользователю.

Справка! Некоторые приложения вычищают автоматически только часть мусора и не могут самостоятельно решить, какой из дубликатов следует удалить. Работу по удалению здесь приходится завершать вручную.

Как удалить дубли с помощью различных программ

Найти в интернете утилиты, созданные для удаления дублей и прочего мусора с жесткого диска, не составит труда. Среди них есть как платные, так и бесплатные программы, а выбор конкретной зависит от предпочтений владельца компьютера. Вот несколько приложений, высоко оценённых пользователями.

1. CCleaner. Говоря о качественной очистке компьютера от мусора, нельзя не упомянуть CCleaner. Помимо стандартной очистки компьютера, утилита предлагает и поиск дублей.Сделать это можно в разделе «Сервис». Здесь по желанию пользователя задаются критерии поиска: по размеру, дате, названию или содержанию. Также есть возможность пропускать некоторые файлы, например:
   • «нулевые»;
   • системные или недоступные для чтения;
   • скрытые;
   • размер которых превышает заданный.

   Утилита позволяет изменять и задавать место или диск, в котором будет проводиться поиск. Результаты отображаются в виде таблицы, ее можно сохранить. Плюс ко всему файлы можно сразу удалить, отметив их «галочкой».

2. DupKiller. Приложение бесплатно доступно на официальном сайте. Утилита позволяет находить файлы с любым разрешением. Сортировать найденные дубли можно по размеру, дате, содержимому или имени.Из плюсов:
   • интерфейс полностью на русском языке;
   • большое количество настроек и вариантов сортировки;
   • быстрая работа на всех устройствах.
3. DupeGuru. DupeGuru подходит и Mac, и Windows. Полностью бесплатно. Приложение ищет файлы с одинаковыми и похожими названиями.Отлично справляется с музыкальным файлами, находя среди них дубли даже при разных тегах. Утилита умеет сравнивать не только одинаковые, но и похожие файлы.DupeGuru поддерживается и на Mac, и на Windows, однако разработчики больше не работают над версией для Windows. На сайте можно скачать последний вариант программы – он полностью работоспособный.
4. AllDup. AllDup – приложение, чьими отличительными особенностями является:
   • поддержка любой операционной системы от Windows XP до Windows 10;
   • диагностика и поиск дублей проводится как в скрытых папках, так и в архивах;
   • по ходу поиска возможно просмотреть каждый файл, не закрывая приложение, а также сразу переименовать или перенести в другое место.

   Также следует отметить, что утилита полностью поддерживает русский язык и является бесплатной.

5. Duplicate Cleaner Free. Duplicate Cleaner Free позволяет обнаружить копии файла любого формата. Среди плюсов при работе с этим приложением выделяют:
   • фильтрацию по разрешению изображения;
   • поддержку русского языка;
   • наличие бесплатной версии;
   • высокую скорость и качество работы.

   Однако для расширения возможностей поиска, например, изображений следует установить платную версию. Утилита пользуется большой популярностью из-за удобства и эффективности в работе.

   Важно! При необходимости удаления дубликатов файлов конкретного типа также разработаны отдельные приложения. Например, только для музыки, изображений или видео

   .

6. Gemini 2. Одно из лучших приложений для Mac. Программа платная, стоит 20 долларов на официальном сайте.Утилита ищет как копии, так и просто похожие файлы, показывая, в чём между ними разница. Приложение также способно запоминать файлы, которые уже были оставлены в предыдущие проверки.
7. Duplicate Finder. Приложение позволяет искать и сортировать файлы по размеру и названию. Отличительный плюс в том, что утилита удаляет «нулевые» и пустые папки. Программа также бесплатна, однако не поддерживает русского языка.

Приложений по поиску дубликатов в памяти компьютера великое множество. Установка хотя бы одного из них и периодичность в использовании дают ощутимое преимущество и позволяют провести качественную и полную очистку. Оптимизация места на жёстком диске положительно скажется на работе компьютера.

Видео по теме

На следующем видео рассказано о способах поиска и удаления дубликатов файлов на компьютере: