Требуется совет специалиста, технология записи с сети на диск, 1+ Гбит / с

Question

Существует ли какая-либо другая технология внутреннего хранения, кроме ОЗУ, которая может обеспечить производительность записи 1 Гбит или более в сочетании с одновременным чтением?

Вариант использования следующий:
Многие (100-х) потоки захватывают IP-ввод и записывают в файловую систему, комбинированный IP-вход находится в диапазоне 1Gbps+.

Это будет "непрерывная" запись, поэтому я сомневаюсь, что SSD может соответствовать требованиям.

Мой анализ состоит в том, что оперативная память - единственное внутреннее устройство, которое может справиться с этим требованием, однако я не являюсь экспертом в области хранения.

Кроме того, есть ли какие-либо проблемы с файловой системой, о которых следует знать?

Answer 1

PCI-Express на основе ssds может сделать свое дело.

Если не считать этого, вы можете попробовать добавить ssds в пул, чтобы получить достаточную пропускную способность.

Answer 2

В зависимости от того, сколько места вам нужно, если ваша материнская плата может поддерживать в ней больше оперативной памяти (или обновление), вам может потребоваться увеличить ее, а затем создать диск ОЗУ для хранения активных файлов. затем просто убедитесь, что он периодически копирует на жесткий диск.

Answer 3

Большинство сетей SAN легко заполняют соединение со скоростью 1 Гбит / с. Многие устройства SCSI с прямым подключением также могут делать это с помощью рейд-карты хорошего качества и нескольких накопителей. Вы можете сделать это, и это не сложно, но это не будет "дешево"

На самом деле, если подумать об этом .. Это действительно только 125 МБ / с 8 дисков SATA в массиве raid. Вероятно, меньше, это будет зависеть от постоянной скорости записи.

Answer 4

1 гигабит/ с не так уж и быстро. Один HD может почти справиться с этим для последовательных передач, а 4-х дисковый RAID-10 или SSD среднего уровня определенно подойдет. Если вы говорите о 1 гигабайт/ с, то это совсем другая история.

К сожалению для вас, у вас есть гораздо больше проблем для решения и вопросов, прежде чем вы сможете найти полезное решение.

• Сколько данных вы собираете?
• Как вы храните данные?
• Что ты с этим делаешь?
• Как долго вы должны держать это?
• Как это записывается на диск?
• Какой у тебя бюджет?

Просто сказать «брось RamSan в это» не очень-то хорошо, если он слишком маленький или слишком дорогой.

Другие вещи, которые всплыли у меня в голове: если «IP-данные» - это захват пакетов, а вы говорите о 1 ГБ / с, как вы получаете все это в единую систему для захвата? Если вы мультиплексируете данные из нескольких систем, используете ли вы какое-то общее хранилище? Если нет, то что вам действительно нужно?