Storage Gateway, DataSync

Question 1

Storage Gateway
Для чего этот сервис?
С какими сервисами он интегрируется?
Как легко запомнить?

Answer 1

Для создания Gateway’я из On-Premise в AWS для файловых систем и object store’а
Target’ами в AWS могут быть
- EBS, InstanceStore, EFS, FSx
- S3, Glacier

Question 2

Storage Gateway
Как осуществляет кэширование файлов?
В чём заключается оптимизация data-transfer’а?

Answer 2

Storage Gateway кэширует данные в On-Premise. Оригинал данных хранит в облаке.

Storage Gateway оптимизирует data-transfer через
- отправку только изменённых данных в Cloud
- компрессию данных

Question 3

Storage Gateway VS DataSync
В чём сходства? В чём отличия?

Answer 3

• Storage Gateway делает ONGOING REPLICATION ИЗМЕНЕНИЙ из On-Premise в Cloud
  то есть данные хранятся на On-Premise, но реплицируются в облако
• DataSync ПЕРЕНОСИТ, мигрирует данные из On-Premise в Cloud

Question 4

Storage Gateway делится на 3 типа
Какие?
Какие из них поддерживают NFS, iSCSI, SMB?

Answer 4

• File Gateway для файлов
• Volume Gateway для volume’ов
• Tape Gateway
• File Gateway поддерживает NFS и SMB
• Volume Gateway поддерживает iSCSI

Question 5

FSx File Gateway и FSx for Luster
Чем они отличаются? Как связаны? Для каких ОС?

Answer 5

• FSx File Gateway - это разновидность сервиса Storage Gateway. Работает с Windows ФС. Нужен для создания Gateway’я из on-premise.
• FSx for Luster - это сервис для хранения файлов в AWS. Основан на Linux.

Question 6

RefreshCache API в StorageGateway
Какую проблему оно решает?
Как автоматизировать выполнение?

Answer 6

Если user загрузил файлы НЕ через File Gateway, а НАПРЯМУЮ в S3 bucket,
то получится рассинхронизация данных между S3 и On-Premise

Выполнять по расписанию через Лямбда функцию

Question 7

DataSync
Для чего этот сервис?
С какими сервисами интегрируется?

Answer 7

это сервис для переноса данных (backing-up) по расписанию (каждый час/день) между
- AWS и On-premise (установить DataSync Agent)
- между S3, EFS, FSx for что-угодно

Исключение EBS

Question 8

DataSync и DMS
Чем отличается?

Answer 8

DMS НЕ работает с файловыми системами (EBS, EFS, FSx)
DataSync работает с S3, EFS, FSx

Исключение EBS - с ним НЕ работает даже DataSync

Question 9

DataSync при переносе файлов теряет … и сохраняет …

Answer 9

НЕ теряет ничего
сохраняет метаданные и permissions

Question 10

Данные из On-Premise нужно перенести/забэкапить в S3 Glacier.
Какие сервисы умеют это делать?
Какое промежуточное звено им для этого нужно?
Как легко запомнить?

Answer 10

• Storage Gateway напрямую
• DataSync напрямую
• Snowball нуждается в S3 Standard и S3 Lifecycle Rules

Программные сервисы НЕ нуждаются в промежуточном костыле.
А вот физическому чемодану/грузовику Snow нужен S3 LifeCycle.