Накопившийся в процессе работы компьютера файловый мусор обычно представляет собой не только ненужные пользователю или временные файлы. Отдельной категорией являются файлы-дубликаты, которые одинаковы по своему содержанию, но хранятся в разных папках или на разных дисках компьютера.
Это могут быть, например, неоднократно сохраненные документы, повторяющиеся или похожие фотографии, одни и те же музыкальные композиции, которые вы скачали из Интернета и сохранили в разных папках или под разными именами. Важно понимать, что дубликатами, по сути, являются две версии одной и той же фотографии, имеющие разное разрешение. Или одна и та же песня одного и того же исполнителя, но записанная на разных концертах. Либо две версии одной и той же музыкальной композиции, но записанные в разных аудиоформатах.
Примером файлов-дубликатов можно считать также и две версии фильма, сохраненные с разным качеством или опять же в разных видеоформатах. Разумеется, вручную обнаружить такие дубликаты достаточно сложно, поэтому на помощь мы призовем специальные программы, которые занимаются поиском файлов-дубликатов. Как вы уже наверняка поняли из предыдущего абзаца, дубликаты каждого типа файлов (рисунки, музыка, видео, документы) имеют свои особенности.
Алгоритмы поиска дубликатов всех типов файлов значительно отличаются друг от друга, поэтому и поиском дубликатов файлов разных типов занимаются, как правило, разные программы. Рассмотрим некоторые из них. К тому же важно не только обнаружить дубликаты, но и выбрать самую последнюю версию документа или наиболее качественный видео- либо аудиофайл. Мы рассмотрим каждый тип файлов отдельно, а также приведем список популярных программ для работы с дубликатами.
Наиболее ярким примером картинок-дубликатов могут служить одинаковые или очень похожие фотографии. Многие современные фотоаппараты позволяют снимать в серийном режиме, когда снимки делаются с очень коротким интервалом - от нескольких долей секунды до нескольких секунд. При этом получившиеся снимки отличаются друг от друга совсем незначительно. Как показывает практика, нет реальной необходимости хранить похожие фотографии, достаточно выбрать один-два удачных снимка из серии, а остальные удалить.
Еще один случай, когда могут появляться дубликаты файлов с изображениями, - создание резервных копий фотографий на жестком диске, выборка картинок для презентации, при котором они копируются в другую папку. В общем пользователь зачастую сам создает копии изображений, а потом забывает их удалять. Впрочем, причины появления дубликатов изображений могут быть самыми разными. Наша задача - избавиться от таких дубликатов и очистить место на жестком диске. Среди наиболее распространенных программ, предназначенных для поиска картинок-дубликатов на компьютере, можно назвать следующие.
Так же как и изображения, музыкальные файлы порой могут занимать много дискового пространства, и в некоторых случаях найти одинаковые или похожие музыкальные композиции вручную бывает проблематично. На помощь придут специализированные приложения, автоматизирующие этот процесс. Расскажем о некоторых наиболее популярных из них.
Борьба с дубликатами видеофайлов имеет свои особенности по сравнению с поиском дубликатов картинок или музыки. Из-за больших размеров видеофайлов их обычно не так много на дисках компьютера, как музыки или изображений. Кроме того, появление дубликатов фильмов или видеороликов не столь распространенное явление, как «клонирование» фотографий или песен. Зато удаление даже одного клона видеофайла поможет освободить значительное количество дискового пространства. Кроме того, алгоритм сравнения видеопотоков гораздо сложнее рисунков или даже звучания музыки. По этой причине программ, предназначенных для поиска дубликатов видеофайлов, существует не так много. Остановимся на некоторых из них.
Если вы являетесь киноманом и храните на своем компьютере большую коллекцию разных фильмов либо занимаетесь видеомонтажом и имеете множество видеофрагментов на жестком диске, то вам стоит провести «инвентаризацию» видеоархива. Возможно, вы найдете скрытые резервы своего компьютера.
Как вы уже наверняка поняли, не существует универсальной программы, позволяющей избавиться от всех файлов-дубликатов одним махом, - для каждого типа данных требуется свой инструмент. Однако если оставить в стороне сложные алгоритмы сравнения изображений и звуков, а ограничиться просто сравнением имени, размера и даты файла, то можно отыскать немало дубликатов среди тех типов файлов, о которых мы здесь еще не упоминали. Это могут быть документы, файлы других форматов, которые зря занимают место на диске. Чтобы найти такие дубликаты, часто можно обойтись без специализированных программ. Например, если вы используете какой-нибудь популярный файловый менеджер, то можно воспользоваться его средствами для поиска и удаления файлов-дубликатов. Среди файловых менеджеров, имеющих функцию поиска файлов-дубликатов, можно назвать:
Если же вы не привыкли пользоваться файловыми менеджерами, то не стоит их устанавливать на компьютер только ради поиска дубликатов. Для этой задачи существуют специализированные приложения:
Эти и множество других платных и бесплатных приложений на любой вкус помогут вам избавиться от дубликатов файлов на ваших жестких дисках.
" пришла новая - "как во всем этом разобраться?" Объемы современных жестких дисков достигли того, что на них вполне может случайно затеряться с десяток DVD-образов, не говоря уже о сотнях фотографий. Вы можете не замечать ненужных и повторяющихся файлов вплоть до того момента, когда место вдруг неожиданно закончится. Но перед тем, как покупать новый жесткий диск, имеет смысл почистить старый на предмет дубликатов. Возможно, после генеральной уборки проблема свободного места уже не будет стоять так остро. Искать повторяющиеся файлы вручную – это долго и неудобно. Гораздо проще воспользоваться одной из специальных утилит, которые выполняют большую часть работы за вас. Если вы готовы к ревизии жесткого диска, осталось только подобрать подходящий инструмент.
Разработчик: Ashisoft SoftwareНайденные дубликаты выводятся не по ходу сканирования, а после того, как поиск будет завершен. В то время, когда Duplicate Finder работает, вы можете наблюдать в строке состояния за ходом выполнения задания и за тем, сколько файлов было проверено. Результаты поиска будут представлены в виде списка. Различить, какие файлы являются дубликатами, можно по цвету: каждая вторая пара одинаковых файлов будет выделена голубым. Честно говоря, очень наглядным назвать такое выделение нельзя - было бы гораздо удобнее, если бы использовался другой цвет, но возможности его изменить мы в программе так и не обнаружили.
В списке найденных файлов показывается исчерпывающая информация о каждом из них: путь на диске, расширение, размер, дата последнего изменения. При помощи команд контекстного меню или кнопок на панели инструментов можно быстро переместить файл в другую папку, удалить его или скопировать. Кроме этого, можно просмотреть свойства файла, открыть в «Проводнике» папку, в которой он находится, или открыть сам файл. Стоит отметить достаточно широкие возможности выделения файлов в списке. Например, есть команда для быстрого выделения всех найденных дубликатов, для выделения всех файлов, которые относятся к указанным папкам, а также по размеру и по дате создания.
Предпросмотр некоторых графических файлов можно выполнить прямо в Duplicate Finder, правда, список поддерживаемых форматов не очень велик. Например, файлы.jpg и.bmp открылись во встроенном просмотрщике без проблем, а вот.tiff посмотреть не удалось. Для коммерческой программы, предназначенной для поиска дубликатов, стандартная схема "триал-версия на 30 дней" не подходит, поскольку за это время вполне можно успеть выполнить поиск ненужных файлов на всех жестких дисках, и приложение окажется просто ненужным. Поэтому разработчики Duplicate Finder применили другой подход: в оценочном режиме при помощи программы можно переместить, скопировать или удалить до 50 файлов, общий размер которых не может превышать 2 Мб. Впрочем, ничто не мешает вам удалять дубликаты, найденные при помощи Duplicate Finder, из файлового менеджера, но это не очень удобно. Хотя, если вы выберете этот, в общем-то, не очень честный способ, то имейте в виду, что в меню Action есть удобная команда Copy File Path To Clipboard, которая дублируется сочетанием клавиш CTRL+W. При выполнении этой команды в буфер обмена копируется путь к выделенному файлу. Остается только вставить его в командную строку файлового менеджера, и вы быстро окажетесь в нужной папке.
Разработчик: Александр РословИсключения тоже гибко настраиваются: можно указать минимальный и максимальный размер файлов для поиска, указать допустимые атрибуты для файлов и папок, а также расширения файлов и папки, которые должны быть исключены из поиска. DupKiller может искать дубликаты не только на жестких дисках, но и на виртуальных, RAM- и CD/DVD-дисках. Очень удобно, что для каждого носителя выводится его общий размер, а также количество свободного места в гигабайтах и процентах. После удаления ненужных файлов вы сможете сравнить результаты и оценить, насколько программа оказалась полезной. С ее помощью вы также можете определить, какие файлы уже были скопированы на DVD, и потому могут быть безболезненно удалены с винчестера. Во время сканирования программа ведет подробный лог операций и сообщает, какое действие выполняет в данный момент. После завершения операции выводится окно с сообщением о том, сколько времени было потрачено на поиск, сколько найдено повторяющихся файлов, и какой размер они занимают на жестком диске.
Список найденных дубликатов достаточно нагляден: файлы разбиваются на группы, которые визуально отделены друг от друга. Щелчок по файлу открывает окошко предварительного просмотра. Просмотр доступен для многих графических файлов, а также для всех текстовых. А подключив плагин, который входит в поставку DupKiller, но по умолчанию выключен, можно, не покидая программу, выполнять прослушивание аудиофайлов.
Возможности работы со списком дубликатов тоже на высоте: есть кнопки для быстрого удаления выделенных и помеченных файлов, автоматическое выделение файлов по ряду признаков. Параметры удаления настраиваются отдельно – можно переносить файлы в «Корзину» или удалять их безвозвратно.
Разработчик: Reasonable SoftwareЕсли вы регулярно делаете резервное копирование, а также выполняете синхронизацию данных между двумя компьютерами, у вас неизменно скапливается большое число версий одних и тех же файлов. Благодаря функции поиска похожих файлов (Similar Files), NoClone позволяет найти и удалить их. В настройках программы можно определить, на сколько процентов файлы должны быть похожи, чтобы NoClone показала их в списке дубликатов. Список с найденными дубликатами достаточно нагляден: в нем можно увидеть название, размер, расположение и дату файла. Очень продуманна функция предварительного просмотра изображений – если в других программах картинки показываются в небольшом всплывающем окошке, которое появляется при выборе графического файла в списке, тут есть специальная панель предпросмотра. На ней можно отобразить несколько файлов одновременно.
Разобраться со списком дубликатов поможет инструмент Smart Marker. C его помощью можно выделить найденные файлы по таким критериям, как размер, дата, название, количество символов в имени, расположение. Кроме этого, есть специальные флажки "оставлять как минимум один невыделенный файл в группе" и "выделить файлы в каждой группе".
Еще одна особенность NoClone обнаруживается, когда дело доходит до удаления файлов. Кроме стандартных способов удаления – помещения дубликатов в корзину и полного удаления – в программе есть еще один интересный вариант: замена файла NTFS-ссылкой. Иными словами, программа оставляет на жестком диске только один файл, а вместо всех копий создает ссылки, которые ведут на него. Это может быть очень полезно, когда найденные при помощи NoClone дубликаты используются другими приложениями, например, если речь идет о библиотеке виртуальных дисков в программе Alcohol. Если вы удалите файл, то при запуске таких приложений можете получать сообщения об ошибках. Если же будет создана NTFS-ссылка, программа будет "видеть" файл по старому адресу, а фактически его там не будет.
Разработчик: Marcus Kleinehagenbrock
Размер дистрибутива: 650 Кб
Распространение: бесплатно
Интерфейс: английский
CloneSpy – это компактная бесплатная утилита для поиска дубликатов файлов со множеством интересных решений, к которым вполне могут присмотреться создатели многих коммерческих программ.
Во-первых, тут очень удобное окно для добавления папок в область поиска. В большинстве программ для добавления каждой новой директории приходится по новой вызывать окно со списком папок и проделывать путешествие к нужному элементу, начиная с "Моего компьютера".
В CloneSpy все гораздо удобнее: есть специальное окошко для добавления папок, которое разделено на две части: в левой вы выбираете нужную директорию, затем нажимаете кнопку Add Selected Folder, и директория добавляется в список папок, которые будут сканироваться. Повторять эти действия можно сколько угодно раз, не закрывая окна добавления папки. А список выбранных папок можно сохранять для дальнейшего использования и, при необходимости, подгружать в программу.
Следующая особенность – вывод результатов поиска по мере обнаружения дубликатов. В других программах, чтобы увидеть повторяющиеся файлы, как правило, приходится ждать конца сканирования, которое, в зависимости от того, насколько широка область поиска, может затянуться и на всю ночь. Тут же результаты можно просмотреть мгновенно – по мере поиска программа открывает отдельные окна для каждой группы повторяющихся файлов. В таком окне сразу же можно запустить файл, открыть папку, в которой он находится в «Проводнике», отметить файлы вручную или, по ряду критериев (дата, количество символов в названии, длина пути к файлу), удалить или пропустить и перейти к следующей группе дубликатов.
Работу с программой несколько омрачает отсутствие возможности предварительного просмотра изображений – каждый раз запускать программу для просмотра графики очень неудобно. Если вы выполняете сканирование большой области, то вывод результатов в отдельном окне для каждой группы файлов вряд ли будет удобен. Поэтому в этом случае перед началом сканирования стоит заглянуть на вкладку Report настроек программы и изменить параметры вывода результатов. Правда, выбрав вариант отображения результатов в виде единого списка, вы не сможете работать с дубликатами до завершения сканирования.
Довольно часто на компьютере встречаются одинаковые изображения - не правда ли? И чем больше у вас папок с картинками, тем более вероятно что в них находится большое количество дубликатов. Это не критично, но все же место занимает. Вы будете удивлены сколько места на диске освободится если проверить и удалить все дублированные картинки. Именно этим мы и займемся в нашей сегодняшней статье. Как правило мы копируем с фотоаппарата, телефона, планшета и т.д. целые папки с фотографиями и редко удаляем копии даже если и замечаем их. Почему? Да потому что это хлопотно. Давайте посмотрим как можно автоматизировать процесс поиска одинаковых изображений и их удаления.
Почему нельзя сделать это в ручном режиме? Можно, но заниматься этим вручную - весьма трудоемкое и утомительное занятие. А если у вас тысячи фоток... еще и непродуктивное занятие. Лучше выпить чашечку кофе пока работает программа, чем самому напрягать мозг и думать "видел я эту фотку или нет - это копия?". Да и это практически невозможно. (забегая на перед скажу - после сканирования на моем компьютере программа обнаружила 11 934 одинаковые картинки!!!) Как по мне так лучше пусть "железка работает"... Если Вы такого же мнения - тогда смотрим ниже подробную инструкцию как найти и удалить одинаковые картинки.
Есть несколько программ, которые могут искать дубликаты файлов .
AntiDupl.
NET
Duplicate
Finder
Duplicate
File
Detector
Duplicate
Cleaner
ImageDupeless
Image
Comparer
Duplicate File Remover
Многие программы прекрасно умеют работать с различными файлами и с разными задачами.
Но мы рассмотрим только одну программу - , которая максимально хорошо может справиться с поставленной задачей. Почему именно эта программа? AntiDupl.NET- бесплатная программа с очень мощным функционалом. Она позволяет делать поиск похожих или полностью одинаковых изображений во всех основных графических форматах типа JPEG, GIF, TIFF, BMP, PNG и т.д. Стоит отметить что программа анализирует само содержание графических файлов, что позволяет находить не только полностью идентичные, но и похожие изображения . Программа поддерживает русский интерфейс, есть возможность гибкого управления параметрами поиска а также можно определять некоторые типы дефектов на изображениях. И в то же время программа довольно понятна и я уверен, что у вас не возникнет каких-либо трудностей.
Давайте посмотрим пример поиска и удаления одинаковых изображений
Открываем программу и указываем язык интерфейса
И добавить каталог в котором будут учитываться все картинки во всех внутренних папках. Или же какую-то конкретную папку на ваше усмотрение.
Также можете настроить опции поиска (если необходимо). После чего нажимаем "Начать поиск ".
Запасаемся терпением на несколько минут.
Далее программа в окне результата покажет все "пары" одинаковых картинок и Вы можете начать удалять ненужные копии ваших фото. Есть два варианта - удалить первую или вторую. Можете смотреть в окошках просмотра и определить какую фотографию хотите удалить. Если вы хотите удалить к примеру все первые картинки тогда нужно нажать сочетание клавиш Ctrl + A и нажать в верхней панели кнопку "Удалить первые картинки в выделенных результатах ". После чего все первые картинки попадут в корзину. После удаления всех дубликатов на моем компьютере стало больше места примерно на 4,6Gb. Надеюсь эта статья поможет и вам избавиться от ненужных копий. Успехов!
Янв 28 2017
Наверняка у любого из нас на диске со временем скапливаются файлы-дубликаты. Файлы в «Загрузках», которые вы скачали несколько раз, одинаковые фотографии и музыкальные композиции, лежащие в таких недрах, что до них просто не доходят руки. Избавиться от всего этого можно и вручную, но куда быстрее за вас сработают специальные утилиты, ищущие одинаковые файлы.
Очень популярный «чистильщик», который, наверное, установлен у каждого. Да, он не только искать системный мусор и очищать историю и cookies браузеров, но и убирать дубликаты файлов.
Платформы: Windows, Mac.
Цена: бесплатно, 24,95 доллара за расширенную версию.
Программа ищет файлы как с одинаковыми или похожими названиями, так и с идентичным содержимым. Хорошо работает с музыкой и может отыскивать одинаковые музыкальные файлы, даже если у них разные теги. Кроме того, dupeGuru умеет сравнивать изображения, чтобы найти не только одинаковые, но и просто похожие фотографии.
Разрабатывается для Mac и Linux. Версия для Windows больше не поддерживается разработчиком, но её можно загрузить с официального сайта - она полностью работоспособна.
Платформы: Windows, Mac, Linux.
Продвинутое приложение для поиска файлов, которое, помимо прочего, может удалять дубликаты. SearchMyFiles обладает гибкими фильтрами, так что вы можете настроить поисковую выдачу так, как вам угодно.
Платформы: Windows.
Популярное приложение для Mac, которое ищет одинаковые или похожие файлы и показывает, в чём разница между ними. Копии в «Фото», в фонотеке iTunes - мимо Gemini 2 не пройдёт ничего. Разработчиками заявлен умный механизм поиска дубликатов, который запоминает, какие файлы вы оставляете, а что решаете удалить.
Платформы: Mac.
Хотя AllDup бесплатна, она умеет немало. Ищет, удаляет, копирует и перемещает дубликаты файлов, в том числе одинаковые аудиозаписи с разными тегами. Присутствует гибкая настройка поиска. С помощью встроенного просмотрщика можно изучить файлы и выбрать, что именно удалять.
Платформы: Windows.
Duplicate File Finder быстро и эффективно отыскивает файлы-копии. Предоставляет интересную возможность поиска дубликатов не только на жёстком диске, но и в локальной сети. Может работать с изображениями и музыкой, сравнивая как теги, так и содержимое. Функция предпросмотра поможет разобраться, что действительно удалить, а что оставить. К сожалению, в бесплатной версии довольно много опций недоступно.
Платформы: Windows.
Цена: бесплатно, 29,95 доллара за расширенную версию.
Универсальный файловый менеджер, который может сделать с вашими файлами что угодно. В том числе и найти файлы-дубликаты. Включить опцию поиска копий можно на вкладке с параметрами поиска, там же, где указываются другие атрибуты искомых файлов.
Платформы: Windows.
DupeGuru выглядит наиболее привлекательным вариантом. Он бесплатен, при этом предлагает все необходимые функции для избавления вашего диска от скопившегося барахла. Огорчает лишь тот факт, что разработка версии для Windows остановлена. Пользователям Windows, не желающим платить за коммерческие альтернативы, больше подойдёт AllDup. А CCleaner и Total Commander - это более универсальные и распространённые решения, которые, наверное, уже установлены у каждого.