Централизация данных AWS

Question

Я хочу централизовать около 1 ТБ данных в AWS для 3 в помещениях (по 5 пользователей в каждом местоположении). Мы растем, но все еще маленькие. Каждое местоположение имеет 30/5mpbs соединение. Каждый имеет свой собственный сервер Linux. Я верю, что знаю, что делать, но у меня есть пара вопросов.

1.) Поскольку данные будут храниться в облаке, я хочу оптимизировать трафик между локальными системами и AWS. Существует ли версия Branch Cache для Linux? Или что-то хранить локально между помещением и облаком? Хранилище - это ТОЛЬКО ЕСЛИ мы не можем найти другого решения.

2.) Я лучше с s3, ebs, efs? (Существует пакет, который будет монтировать S3 Bucket).

3.) Если я выберу ebs/efs (с экземпляром), будут ли скорости передачи медленнее или быстрее по сравнению с s3? S3 использует оптимизацию?

Answer 1

Сначала определитесь с типом облачного хранилища. Amazon AWS предлагает несколько различных вариантов хранения. Более подробную информацию можно найти здесь.

1. S3 (Simple Storage): сервис статического хранения, предназначенный для архивирования, статических веб-сайтов или распространения мультимедиа. Максимальный размер файла одного объекта S3 составляет 5 ТБ. Производительность оптимизирована для передачи больших объемов данных.

2. EBS (Electric Block Storage): постоянное хранилище для баз данных, приложений, хранилище. Лимит хранения 16 ТБ. Доступ только из 1 экземпляра EC2, который содержится в одной зоне доступности.

3. Amazon EFS (Elastic File System): работает как управляемая сетевая файловая система, но в облаке. Его можно использовать для всех экземпляров AWS EC2. Максимальный размер файла составляет 52 ТиБ. Производительность более гибкая, чем другие варианты.

Что касается оптимизации ваших данных, есть Amazon Storage Gateway. Или есть такие сервисы, как Datapath.io. Кроме того, Amazon предлагает AWS Direct Connect для выделенного соединения между вашими серверами и AWS. Чтобы обеспечить более согласованное соединение, вы также можете приобрести выделенные IOPS за плату.

Оптимизация производительности AWS - это сочетание выбора правильного типа хранилища и экземпляров для ваших индивидуальных данных, управления передачей данных и эффективного сетевого конвейера.

Answer 2

Похоже, работа для Amazon Storage Gateway. Хотя я никогда не использовал его сам, поэтому не могу дать больше подробностей, чем на этой странице.