Я работаю в компании, которая собирает тонны сенсорных данных с тест-драйвов. В настоящее время у нас есть около 200 ТБ (1 638 400 Гбит) данных, которые необходимо сохранить.
Мы планируем установить ленточную библиотеку в конце года, но сейчас мы должны скопировать данные на несколько жестких дисков, отформатированных в ext4.
Сервер с подключением 10 Гбит / с к данным датчика доступен для резервного копирования. Этот сервер имеет два порта UBS 3.0. На сервере в настоящее время установлен Debian, но мы можем установить любой Linux для этой задачи.
Наши внешние жесткие диски - это Western Digital MyBooks 3.0 с 8 ТБ дискового пространства и скоростью записи 180 МБ / с (1440 Мбит / с).
Таким образом, с двумя портами USB 3.0 мы теоретически можем записывать 2,8 Гбит / с, что дает общее время записи примерно 162 часа (6,8 дня). Поскольку это оптимальный случай и не учитывается время замены дисков, мы ожидаем, что это займет не менее двух недель по пять рабочих дней каждый. Пожалуйста, поправьте меня, если я ошибаюсь.
Пока эта ситуация кричит ЛЕНТА БИБЛИОТЕКА! Мы должны идти по пути UBS 3.0 сейчас.
Я хотел бы услышать ваши предложения о том, как решить эту проблему самым быстрым и простым способом.
Любая помощь высоко ценится! Спасибо!