Колеблющиеся скорости передачи с md RAID5/vsftpd

Question

У меня есть сервер Ubuntu 8.04.4 с md RAID5, состоящим из 9 дисков. При передаче большого количества данных (через vsftpd) я заметил очень сильные колебания скорости передачи.
Например, во время передачи архива объемом 20 ГБ, каждая пара из 100 МБ, передача будет полностью остановлена на несколько секунд. Тогда это вернулось бы до ~ 55 МБ / с. И это будет повторяться снова и снова; оставляя меня с общей скоростью передачи около 10 МБ / с.
Сервер находится в той же локальной сети 1 ГБ, что и компьютер, на котором я работаю, поэтому я предполагаю, что проблема не в локальной сети.
Я наблюдал такое поведение на этом сервере несколько раз в прошлом, когда мне приходилось передавать большие объемы данных (более 200 МБ).

Просмотр выходных данных iostat , top или наших графиков Cacti не дал мне никаких указаний на то, что может вызвать эту проблему.

Любая идея о том, как диагностировать проблему, как это было бы оценено.

Answer 1

Честно говоря, я не буду использовать FTP-передачу для измерения скорости - это устаревший протокол, и я не удивлюсь, если он замедлит вас.

Можете ли вы экспортировать каталог с помощью NFS и попробовать перенести файлы таким образом?

Answer 2

И ftp, и samba не используют сжатие. Используйте rysnc с флагами --progress и -Z, чтобы использовать сжатие и сообщать о прогрессе.

Если большой объем данных - это не большое количество файлов, а несколько файлов большого размера (> 2 ГБ), проблема может быть связана с разреженными файлами.

Также проверьте «more /proc /mdstat», когда скорости медленные, чтобы убедиться, что скорости не медленные из-за повторной синхронизации массива md.

Answer 3

Я до сих пор понятия не имею, что было причиной проблемы. В конце концов я заподозрил, что процессор системы слишком слабый (высокая загрузка, высокая загрузка процессора).

Сегодня я обновил систему до Ubuntu 10.04, и проблема, похоже, решилась сама собой. Производительность пока не так стабильна, как хотелось бы, но в среднем она улучшилась как минимум в 10 раз.