O documento apresenta os diferentes tipos de AWS Storage Gateway, incluindo Gateway de Fita, Gateway de Volume e Gateway de Arquivo. O documento também descreve como a Fundação IDI migrou 160 TB de dados para a AWS usando o AWS Storage Gateway.

1. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Melissa Ravanini, Arquiteta de Soluções
Amazon Web Services
CMP301
Sessão Avançada: Armazenamento
Híbrido na Nuvem com AWS Storage
Gateway

2. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Agenda
• Introdução à família do AWS Storage Gateway
• Gateway de Fita
• Migrando fitas para a nuvem
• Gateway de Volume
• Volumes stored e cached
• Criação e recuperação de Snapshots de Amazon EBSs
• Gateway de Arquivo
• Como ele funciona
• História de Cliente: Aprenda com a Fundação IDI como
migrar de forma consistente e segura 160 TB de dados
para a AWS

3. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Transferência de dados
OnlineOffline
Segurança e gestão
de dados
Portfólio completo de soluções
Amazon
EFS
Amazon
EBS
Família AWS Snow
AWS Storage Gateway
AWS Direct Connect
Amazon EFS File Sync
Amazon S3
Transfer Acceleration
Parceiros
Amazon Kinesis
Data Streams
Amazon Kinesis
Video Streams
Amazon
S3
Amazon
Glacier
AWS KMS
AWS IAM
Amazon CloudWatch
AWS CloudTrail
AWS CloudFormation
AWS Lambda
Amazon Macie
Amazon QuickSight

4. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
AWS Storage Gateway
• Integra aplicações on-premises com AWS
• Disponibiliza armazenamento escalável, durável, confiável, econômico
e seguro na nuvem
• Benefícios
• Integração com outras soluções de armazenamento, gestão e
monitoramento da AWS
• Não há necessidade de alteração nas aplicações existentes
• Cache local para acesso a dados com baixa latência
• Trasferência de dados otimizada

5. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Alguns dos nossos clientes

6. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
AWS Storage Gateway Amazon S3 Standard &
Infrequent Access
Arquivos
(NFS v3 / v4)
Volumes
(iSCSI)
Fitas
(iSCSI VTL)
AWS Storage Gateway
Dados armazenados no Amazon S3
• Use as funcionalidades do Amazon S3
(Arquivo)
• Gere snapshots no Amazon EBS (Volume)
• Arquive no Amazon Glacier (Fita)
Use um equipamento para provisioná-lo
• Conversão de protocolo
• Emulação de dispositivo (Fita)
• Cache (escrita / leitura)
• Otimização do tráfego de dados
HTTPS
Amazon EC2
Amazon Glacier
Amazon EBS
snapshots

7. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Gateway de Fita

8. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Gateway de Fita
• Fácil adoção de nuvem: fita virtual no Amazon S3 e no Amazon Glacier, acessadas via Gateway
• Seguro e eficiente: dados comprimidos e criptografados em trânsito e armazenados
• Escalável: capacidade ilimitada de armazenamento; até 1-PB por gateway
• Confiável: recuperação em 3–5-horas do Amazon Glacier com 99.999999999% durabilidade
• Baixo custo: custos previsíveis de armazenamento e redução de esforços em gestão
Media changer
Armazenamento
no
Amazon S3
Arquivamento
no
Amazon Glacier
Servidor
de
backup
iSCSI
Gateway de Fita
Tape drive
HTTPS
Cliente
Armazene suas fitas virtuais no Amazon S3 e no Amazon Glacier com VTL
Cache
local

9. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Use suas ferramentas para arquivar na AWS

10. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Gateway de Volume

11. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Gateway de Volume
• Armazenamento de bloco na nuvem exposto como local
• Até 1 PB de storage por Gateway
• Recupere seus volumes de forma flexível via snapshots
Servidor
de
aplicação
Snapshots
do Amazon
EBS
Gateway de
Volume
Volume
armazenado no
Amazon S3
HTTPSiSCSI
Cliente

12. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Gateway de Volume – Modo Stored
Usando o modo Stored, uma cópia completa do volume é mantida
localmente e também na nuvem
Servidor
de
aplicação
Snapshots
do Amazon
EBS
Gateway de
Volume
Volume
armazenado no
Amazon S3
HTTPSiSCSI
Cliente
100% do dados na AWS e
localmente

13. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Snapshots do Amazon EBS
SAN, DAS, ou NAS (qualquer storage
que suporte volume virtual)
Amazon CloudWatch
Cliente
Gateway de
Volume
Volume
Volume
iSCSI
No Amazon S3
Servidor
de
aplicação
Gateway de Volume – Modo Stored
Buffer de
Upload

14. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Snapshots do Amazon EBS
Amazon CloudWatch
Cliente
Gateway de
Volume
Volume Volume
iSCSI
Dados no volume local e no
buffer de upload
Cópia do volume
na nuvem
Servidor
de
aplicação
Gateway de Volume – Modo Stored
Buffer de
Upload
Snapshot

15. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
No modo Cached, uma cópia completa do volume é armazenado na AWS, e
o dado quente fica disponível localmente
Snapshots
do Amazon
EBS
HTTPSiSCSI
Cliente
Gateway de
Volume
Servidor
de
aplicação
Volume
armazenado no
Amazon S3
Gateway de Volume – Modo Cached
100% do volume
armazenado na AWS
Volume virtual Blocos acessados
frequentemente ficam no cache

16. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Snapshots do Amazon EBS
Amazon CloudWatch
Cliente
iSCSI
Gateway de Volume
Upload buffer
Volume
Cache
VolumeServidor
de
aplicação
Gateway de Volume – Modo Cached
Tamanho dos volumes?

17. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Gateway de Volume – Modo Cached
Operações de escrita

18. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Snapshots do Amazon EBS
Amazon CloudWatch
Cliente
iSCSI
Gateway de Volume
Upload buffer
Volume
Cache
Cliente escreve no gateway, que primeiramente
popula o cache
Servidor
de
aplicação
Gateway de Volume – Modo Cached
Operações de escrita
Volume

19. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Snapshots do Amazon EBS
Amazon CloudWatch
Cliente
iSCSI
Gateway de Volume
Upload buffer
Volume
Cache
Servidor
de
aplicação
Gateway de Volume – Modo Cached
Operações de escrita
Volume
A escrita é então copiada para o buffer

20. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Snapshots do Amazon EBS
Amazon CloudWatch
Cliente
iSCSI
Gateway de Volume
Upload buffer
Volume
Cache
O dado comprimido é então enviado para o Amazon S3 via HTTPS
Servidor
de
aplicação
Gateway de Volume – Modo Cached
Operações de escrita
Volume

21. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Gateway de Volume – Modo Cached
Operações de leitura

22. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Snapshots do Amazon EBS
Amazon CloudWatch
Cliente
iSCSI
Gateway de Volume
Upload buffer
Volume
Cache
Se o bloco está no cache, ele será lido direto dele
Servidor
de
aplicação
Gateway de Volume – Modo Cached
Operações de leitura
Volume

23. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Snapshots do Amazon EBS
Amazon CloudWatch
Cliente
iSCSI
Gateway de Volume
Upload buffer
Volume
Cache
Servidor
de
aplicação
Gateway de Volume – Modo Cached
Operações de leitura
Volume
Se o bloco não está no cache, o gateway requisita o bloco e o popula
no cache local

24. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Snapshots do Amazon EBS
Amazon CloudWatch
Cliente
iSCSI
Gateway de Volume
Upload buffer
Volume
Cache
Servidor
de
aplicação
Gateway de Volume – Modo Cached
Operações de leitura
Volume
O gateway então retorna o bloco que está no cache

25. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Gateway de Arquivo

26. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Gateway de Arquivo
Armazene arquivos como objetos no Amazon S3; Acesse via protocolos de arquivos
Cliente
Amazon
Glacier
HTTPS
NFS
v3 / v4.1
Servidor de
aplicação
Objetos no
Amazon S3
AWS Storage
Gateway - VM

27. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
s3://{bucket name}/{diretorio1}/{arquivo1}
s3://{bucket name}/{diretorio1}/{arquivo2}
s3://{bucket name}/{diretorio1}/{arquivo3}
…
s3://{bucket name}/{diretorio2}/{arquivo1}
s3://{bucket name}/{diretorio2}/{arquivo2}
Gateway de Arquivo
Mapeamento de 1:1 entre arquivos e objetos
nfs://{IP}/{share name}/{diretorio1}/{arquivo1}
nfs://{IP}/{share name}/{diretorio1}/{arquivo2}
nfs://{IP}/{share name}/{diretorio1}/{arquivo3}
…
nfs://{IP}/{share name}/{diretorio2}/{arquivo1}
nfs://{IP}/{share name}/{diretorio2}/{arquivo2}
Gateway de Arquivo
Cliente NFS Objetos no
Amazon S3

28. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Gateway de Arquivo
Controle como seu dado é acessado e armazenado
Opções de NFS/Arquivo
• Papéis do IAM para acesso
• Classes de armazenamento
• Criptografia via AWS KMS
• Inferir o MIME-type
Opções do Amazon S3
• Lista de todos os proprietários
• Somente leitura/leitura e escrita
• Propriedade do objeto (UID/GID)
• Permissões do objeto
Gateway de Arquivo
Cliente NFS Objetos no
Amazon S3

29. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Cliente NFS Objetos no
Amazon S3
ls /foo/*
Gateway de Arquivo
Automação de cargas de trabalho
Inventário
de Objetos e
Metadados
Cache
Arquivos
RefreshCache
API
Amazon
CloudWatch
Events

30. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Gateway de Arquivo - Leituras
Cliente
Arquivo
Cliente NFS
Arquivo
armazenado
como objeto
2 - Operações
de leitura
feitas no
Amazon S3 se
os bytes não
estiverem no
cache
1 - Leitura no cache
Índice
Cache

31. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Gateway de Arquivo - Escritas
Cliente
2 - Upload em multipartes
1 - Escreve no cache
primeiro
Arquivo
Cliente NFS
Índice
Cache
Arquivo
armazenado
como objeto

32. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
A B CA B C D A B C
Cliente
Gateway de Arquivo – Atualizações
Cliente NFS
Arquivo
armazenado
como objeto

33. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
A B CA B C D A B C
A B C D
Cliente
Gateway de Arquivo – Atualizações
Cliente NFS
Arquivo
armazenado
como objeto

34. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Demo

35. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
“Os serviços da AWS permitiram a
escalabilidade da infraestrutura para
armazenamento”
Fundada em 1986, a FIDI é
especializada em serviços de
Radiologia.
Realiza mais de 5 milhões de exames
por ano, gerando +120 TB.
Possui 85 unidades (SP e GO)
Migração do Sistema PACS/RIS
“A AWS também
trouxe visibilidade dos
custos e
escalabilidade de
toda infraestutura”
- Helio Ajzen,
Superintendente de
Infraestrutura

36. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
O Desafio
Importação das imagens dos sistemas legado
para o novo Sistema de PACS/RIS
Transferência de grande volume de dados de
forma rápida e segura
Armazenamento das imagens com alta
durabilidade, disponibilidade e escalabilidade
Garantia de backup
Interessante do ponto de vista financeiro

37. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Solução

38. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Obrigada

39. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Por favor, preencha a pesquisa de satisfação

40. Preencha a pesquisa de satisfação
1. Clique em Schedule 2. Selecione a sessão 3. Clique Session
Evaluation para submeter
seu feedback