Как администратор, у меня есть задача синхронизировать почти 1 ТБ мультимедийных данных (JPG, TIF, BMP изображений или PDF-документов) с тремя партнерами по Интернету, и я спрашиваю, как. Я думаю, это почти 500 000 отдельных файлов в 50 000 папок. У меня также есть NAS на 2 ТБ в центре обработки данных для данных. Я пробовал разные инструменты (обычно бесплатные) для достижения этой цели, но ни один из них действительно не работал.

Я предпочитаю протокол ftp, но nfs также возможен. Я пробовал FTPbox, но его сбой от огромного количества данных.

Большинство протестированных мной инструментов (FreeFileSync, FTPbox, PureSync) не работают или работают очень медленно из-за большого количества сравниваемых файлов.

Неплохо было бы использовать подобный клиенту Dropbox (поэтому я тестировал FTPbox), который может сам определять измененный файл и обновлять его, но я думаю, что даже у клиента Dropbox есть свои проблемы с количеством файлов.

Кто-нибудь знает инструмент для синхронизации этих огромных объемов данных?

1 ответ1

2

Хорошо известный инструмент rsync предназначен для решения подобных проблем. Для этой работы вам потребуется доступ по ssh (или, по крайней мере, демон rsync).

Всё ещё ищете ответ? Посмотрите другие вопросы с метками .