Вопросы с меткой [deduplication]

Дедупликация - это поиск и удаление дубликатов файлов.

1
голос
4ответа
1k показов

Дубликат имени существует решение

У меня около 70 компьютеров с точно таким же оборудованием. Я решил автоматизировать включение и выключение. Я взял 1 ПК. Вот что я сделал: Изменена конфигурация BIOS, так что теперь компьютер ...
1
голос
1ответ
870 показов

Каков наилучший способ объединить два набора файлов, но для дубликатов, чтобы выбрать более старый файл в Windows?

Я наткнулся на глупый случай использования. Я хочу объединить две папки определенным образом (я думаю, что теперь они называются папками, я все еще думаю о них как о каталогах, но неважно). Папки ...
1
голос
1ответ
267 показов

Есть ли способ удалить дубликаты электронных писем из удаленного аккаунта?

У меня есть пользователь, у которого есть несколько дублированных сообщений электронной почты в нескольких папках в его учетной записи IMAP. То, как он сумел создать их, мне не под силу, но моя ...
1
голос
1ответ
82 показов

Объедините строки Excel с дублирующимися ключевыми словами, но уникальными значениями в других столбцах

У меня есть лист Excel с ключевыми словами в столбце B. Для каждой строки будет значение в одной ячейке где-то между столбцом E и столбцом CR. Таким образом, строка 3 будет иметь ключевое слово в ...
1
голос
3ответа
253 показов

Найти копии папок? (Не файлы)

У меня есть дюжина папок, которые являются дубликатами. В них несколько десятков папок, которые являются дубликатами, поэтому у меня есть несколько тысяч копий одних и тех же файлов и папок. Многие ...
1
голос
1ответ
448 показов

Почему функция устранения ошибок в ZFS не работает с FreeBSD 8.2

У меня установлена FreeBSD 8.2 на AMD/64 с 3 ГБ ОЗУ и 690 ГБ в виде пула HD под ZFS. У меня есть две копии идентичного файла (180 МБ видео) в одном каталоге, но df -h указывает, что оба используют ...
1
голос
3ответа
2k показов

Два файла PDF, идентичные за исключением, возможно, разных титульных страниц - как удалить дубликаты?

У меня есть куча файлов PDF, которые представляют собой статьи, загруженные с различных веб-сайтов журнала. Проблема в том, что некоторые из этих файлов PDF являются дубликатами друг друга. Тем не ...
1
голос
3ответа
3k показов

Убедитесь, что две файловые системы идентичны, игнорируя специальные файлы

/media/A и /media/B должны быть идентичны, но я хочу подтвердить их удаление. Поиск дубликатов файлов не работает, потому что они найдут две копии одного и того же файла в B, например. Я только хочу ...
1
голос
1ответ
544 показов

Как можно объединить дубликаты записей в iTunes без потери статистических данных?

Недавно я объединил два своих компьютера в попытке Франкенштейна оптимизировать конфигурацию моего оборудования. Один из этих ПК был намного старше и имел другую коллекцию музыки, чем мой нынешний; ...
1
голос
2ответа
2k показов

Электронная таблица из нескольких столбцов: извлекать уникальные значения в столбце 1, с учетом тех же значений в столбцах 3 и 4?

Вот проблема: с помощью (большой) электронной таблицы с идентификаторами пользователей в столбце 1, пары время / дата в столбце 2, кода курса в столбце 3 и заголовка курса в столбце 4: я хочу создать ...
1
голос
2ответа
199 показов

Есть ли что-то вроде жестких ссылок, которые разбиваются на отдельные файлы по модификациям?

Допустим, файлы orig и copy - это огромные, но идентичные файлы. Поэтому, чтобы сэкономить место на диске, можно было бы либо copy мягкую ссылку на orig либо жестко связать оба файла с одними и теми ...
1
голос
1ответ
212 показов

Проверьте наличие дубликатов файлов в двух коллекциях, игнорируя дубликаты в пределах A

У меня есть четыре аналогичные большие коллекции файлов сайта. Это архивные копии одного и того же дерева каталогов разных времен в прошлом. Я хочу объединить их в самую последнюю коллекцию archive1. ...
1
голос
2ответа
192 показов

Как объединить дубликаты папок со структурой «имя (1)», «имя (1) (1)» и т. Д.

Синхронизация между моим Файловым потоком Google, Google Диском и Synology CloudSync и все перепуталось, и у меня остались сотни дубликатов папок с именем папки, за которыми следуют "(1)" или "(2)" и ...
1
голос
1ответ
1k показов

Обнаружение дубликатов изображений в 7-Zip архивах на Windows?

У меня есть большая галерея изображений, и через несколько лет я понял, что получаю все больше и больше дубликатов. :) По сути, моя галерея состоит из 7-Zip архивов, содержащих наборы изображений. Я ...
1
голос
0ответов
26 показов

Удалить файлы в каталоге B, которые также существуют в каталоге A

На этой странице рассказывается, как удалить файлы в каталоге B, которые также существуют в каталоге A. Я хочу использовать решение для Windows, но без копирования. Может кто-нибудь сказать мне, как ...
1
голос
0ответов
670 показов

Как дедуплицировать файлы при хранении в файловой системе SDFS с использованием OpenDedup

Я перешел по ссылке http://www.opendedup.org/quickstart для установки OpenDedup на мою машину с Linux (Ubuntu 12.04 - 64-битная версия). Я создал том SDFS и смонтировал его. Я скопировал две ...
1
голос
1ответ
88 показов

Найти подпапки, содержащие только дубликаты файлов

Я ищу способ (не включая платное программное обеспечение) для поиска всех папок, которые содержат только файлы, которые также находятся по крайней мере в одной другой подпапке родительского каталога. ...
1
голос
0ответов
278 показов

Как пакетно удалить файлы на основе их контрольной суммы, совпадающей с существующим списком контрольных сумм

Я ищу способ удаления файлов на основе их контрольной суммы, совпадающей со списком ранее увиденных контрольных сумм в текстовом файле или каким-либо другим списком. Контекст представляет собой ...
1
голос
2ответа
854 показов

Программа для удаления точных дубликатов файлов при кэшировании результатов поиска

Нам нужна программа Windows 7 для удаления / проверки дубликатов, но наша ситуация несколько отличается от стандартной, для которой достаточно программ. У нас есть довольно большой статический архив ...
0
голосов
1ответ
366 показов

Как исключить / игнорировать определенные типы / расширения файлов с помощью rmlint?

Я пытаюсь дедуплицировать лабиринтную директорию, но продолжаю получать результаты для содержимого элементов, которые я хочу сопоставить, а не самих включающих элементов, т.е. мои результаты полны ...
0
голосов
0ответов
411 показов

Включить дедупликацию для одной папки?

Можно ли включить дедупликацию для одной папки (и подпапок), а не для всего тома? Примечание: я использую Windows 10 1607 с установленным модулем дедупликации.
0
голосов
1ответ
85 показов

Как найти файлы, которые являются дубликатами файлов в определенной папке?

Мне нужно удалить дубликаты на моем компьютере, так как у меня есть около 5 копий каждой фотографии в разных папках. Я хочу удалить фотографии, которые также появляются в определенной папке, ведь я ...
0
голосов
1ответ
46 показов

Несколько критериев уникальных значений и список

У меня есть две проблемы, с которыми я ищу помощь. Первый - создать динамический список уникальных идентификационных номеров для предметов, соответствующих "Лошади" в столбце J на Sheet 2! "Мяч" в ...
0
голосов
0ответов
3k показов

Как найти "номер редакции" и соответствующую версию Windows для чтения файлов со старого дедуплицированного диска?

У меня есть диск, который оторвался от мертвого сервера. Это явно дедуплицировано - классические ошибки 1305, 80070519 и "плохая ревизия", когда я пытаюсь скопировать файлы, показывают это. Я ...
0
голосов
1ответ
866 показов

Как резервное копирование Borg справляется с дедупликацией и шифрованием данных?

Мне нужно программное обеспечение для резервного копирования, которое выполняет шифрование на стороне клиента. В документации Borg указано, что она выполняет шифрование на стороне клиента, и, в конце ...
0
голосов
1ответ
202 показов

У меня возникла ситуация, когда дедупликация данных в Server 2012 повредила метаданные - как я могу скопировать эти файлы из старого хранилища?

У меня два диска - диск D: и диск F:. Оба эти диска локально подключены к компьютеру с Server 2012. диск F - это устаревшее хранилище данных, мигрирующих на новый диск (D) по мере его увеличения. ...
0
голосов
1ответ
114 показов

rsync заменяет только соответствующие файлы жесткими ссылками

Как заменить файлы в dst/ , которые по содержанию точно совпадают, с файлами из src/ с жесткими ссылками на эти (src/*) файлы? Существует --hard-links вариант для rsync которые я хочу использовать, ...
0
голосов
1ответ
1k показов

(Win Server 2012) Невозможно включить дедупликацию данных на диске C:

Я пытаюсь включить дедупликацию данных на диске C:, но диспетчер сервера не позволяет мне это делать. После использования команды PowerShell он дал мне следующее сообщение: Windows PowerShell ...
0
голосов
1ответ
67 показов

Скрипт для дедупликации файлов и папок с определенным суффиксом

При неудачном восстановлении OneDrive у меня осталось много файлов и папок с суффиксом «(1)» или «(2)». Я хотел бы сценарий (Bash хорошо, так как у меня есть MinGW + Cygwin или PowerShell), который ...
0
голосов
0ответов
71 показов

Удаление ответов в загруженных электронных письмах (т.е. непоследовательных повторяющихся предложений из текстового файла)

Привет, эксперты и сокурсники! У меня есть десятки текстовых файлов, которые содержат ежемесячные архивы рассылки. Я пытаюсь удалить / удалить цитируемые ответы, чтобы каждое сообщение появлялось ...
0
голосов
1ответ
49 показов

Удаление дубликатов из 1 столбца, связанного с именем в нескольких строках

Я пытаюсь создать сводную таблицу для подсчета количества событий, которые посетил человек. В приведенном ниже примере я хотел бы удалить дубликаты, связанные с конкретным человеком. Джойс указан ...
0
голосов
2ответа
227 показов

Есть ли способ сделать резервную копию дедуплицированного диска NTFS с помощью rsync или другого инструмента linux?

Есть ли способ Linux или инструмент, который знает о дедупликации Windows в NTFS? Здесь я использую rsync для синхронизации файлов с общих файловых серверов AD. Общие ресурсы монтируются только для ...
0
голосов
1ответ
1k показов

Удалить дубликаты изображений с разными именами файлов

У меня есть много изображений, которые имеют все одинаковые метаданные (размер, само изображение и т.д.), И единственное различие между ними - это имена файлов. Скажем, у меня есть 10 изображений, ...
0
голосов
1ответ
72 показов

Как найти извлеченные файлы Zip и их папку в Mac

Как я могу перечислить все zip-файлы и их извлеченные папки, чтобы удалить один из них, я скачал много zip-файлов за годы (как и все) и извлек их, так что теперь они занимают вдвое больше места, чем ...
0
голосов
2ответа
5k показов

Как включить дедупликацию данных в клиенте Windows 8.1

Как я могу включить дедупликацию данных в клиенте Windows 8.1 x64. http://weikingteh.wordpress.com/2013/01/15/how-to-enable-data-deduplication-in-windows-8/ Приведенная выше ссылка обсуждает то же ...
0
голосов
1ответ
174 показов

Удаление дубликатов из текстового файла

У меня есть текстовый файл, который может содержать до 13 000 000 случайно сгенерированных кодов, разделенных с "\n" функцией fputcsv в php. Каков наиболее эффективный способ удаления дубликатов из ...
0
голосов
2ответа
177 показов

Как я могу найти дубликаты двоичных файлов, используя свободно доступные инструменты?

В рамках упражнения по сокращению дублирования файлов руководство хотело бы получить отчет обо всех дублированных двоичных файлах, включая изображения, так как кажется, что они превышают 100 000 и ...
0
голосов
4ответа
445 показов

Дедупликация двух наборов контактов

У одного из наших пользователей есть два набора контактов в его электронном письме: 7000 или около того из старой почтовой системы и даже больше в его текущей адресной книге Apple. Мы пытаемся ...
0
голосов
0ответов
200 показов

Как я могу удалить повторяющиеся сообщения из своей папки «Входящие»?

Возможный дубликат: Удаление дубликатов электронных писем в Thunderbird По какой-то причине, известной только Thunderbird и Hotmail, они решили дважды скачать все мои электронные письма. Так что ...
0
голосов
1ответ
1k показов

Ищите инструмент для жесткого диска, который может выполнять дедупликацию и сжатие данных

Привет эксперты и профи! И счастливого Нового 2011 года всем! Я ищу "частный" инструмент, который может дедуплицировать мой внешний жесткий диск. Я уверен, что у меня на дисках вдвое больше файлов, и ...
0
голосов
1ответ
195 показов

Найти RAR с дублированным контентом

Мне нужна утилита для поиска файлов RAR, которые содержат дубликаты данных (то есть файлы в RAR, которые имеют одинаковые хэши, но могут иметь разные имена). Я могу открыть RAR и увидеть, что CRC ...
0
голосов
1ответ
316 показов

Найти дубликаты определенного файла

Я скачал библиотеку иконок с какого-то веб-сайта и использовал несколько иконок в проекте. Теперь мне нужно найти другую иконку из библиотеки, но я не могу найти библиотеку на моем компьютере. ...
0
голосов
1ответ
2k показов

WMP 12.0 добавляет дубликаты записей для одного и того же файла подключенного сетевого диска

Windows Media Player 12 добавляет дубликаты записей для каждого файла на подключенном сетевом диске. Когда я пытаюсь перестроить индекс, перейдя по адресу% ...
0
голосов
1ответ
106 показов

Проверка файлов на внешнем диске на весь компьютер на наличие дубликатов

Я хочу использовать внешний диск для новых целей и хочу посмотреть, какие файлы на нем, если таковые имеются, еще не находятся на моем основном ПК. Я видел программы сравнения, которые могут ...
0
голосов
1ответ
999 показов

Как определить дубликаты файлов (по имени и размеру) и удалить их?

Возможный дубликат: Найти дубликаты файлов на Mac OS X Я пытаюсь grep дубликаты файлов в этом выборе: find . -name '*.CR2' Я хочу удалить дубликат CR2 в моем архиве файлов RAW. Как я могу grep их ...
0
голосов
1ответ
2k показов

избегайте дублирования файлов во время резервного копирования

Я копирую 2 диска на внешний резервный диск. На двух исходных дисках много дублирующих файлов (имя / размер) между ними (для работы). Один из исходных дисков уже скопирован на целевой диск. Я хотел ...
0
голосов
0ответов
108 показов

Копировать только те файлы, которые не существуют независимо от имени файла?

Моя учетная запись Dropbox переименовывает все автоматически загруженные изображения. Я собираюсь очистить свой телефон, и я хотел бы убедиться, что все изображения находятся в папке Dropbox перед их ...
0
голосов
1ответ
1k показов

удалить дубликаты командной строки на Mac

Я искал различные бесплатные программы для удаления дубликатов на моем Mac, но не смог найти хорошее. Я наконец-то остановился на командной строке, чтобы удалить дубликаты файлов, но я не могу ...
0
голосов
1ответ
513 показов

Эффективность дедупликации с контейнером TrueCrypt File и аварийным планом

У меня есть файл контейнера truecrypt объемом 100 ГБ (среди прочего), который я копирую с помощью аварийного плана на внешний жесткий диск. Я отключил "Сохранить временную метку изменения файловых ...
0
голосов
2ответа
24 показов

Дедупликация таблицы на основе выражения с использованием одного поля

Mariadb: mysql Ver 15.1 Distrib 10.3.8-MariaDB У меня есть таблица, построенная как объединение запросов из нескольких других таблиц. Эта таблица выглядит примерно так ...