Deck sobre Armazenamento na AWS.

1. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Roberto Yoshida, Business Development Manager, AWS
AWS Storage

2. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Qual é a sua expectativa dessa sessão?
Tem experiência com AWS?
Tem experiência com algum serviço de Storage da AWS?
Quais tipos de storage trabalha hoje?
Quais os seus desafios?

3. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Agenda
• Diferentes tipos de storage e seu uso (on-prem Vs. AWS)
• Movimentação de dados para a nuvem
• Arquiteturas híbridas de storage
• Total Cost of Ownership (TCO) de storage

4. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
O que está influenciando na relevância do storage?
Artificial
Intelligence
Natural Language
Processing
Internet of
Things
Information
Assets
Data Trust
Frameworks
Escala de Storage Ilimitada

5. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Alguns clientes globais de storage da AWS

6. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Quadrante Mágico do Gartner - 2017
- Gartner Magic Quadrant for Public Cloud Storage Services, Worldwide
Raj Bala, Arun Chandrasekaran, John McArthur, July 24, 2017
“AWS define o mercado de storage em nuvem
pública em que todos os outros provedores
operam.”

7. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
“…a escala em que a AWS opera o storage na
nuvem pública domina os outros provedores no
Quadrante Mágico.”
- Gartner Magic Quadrant for Public Cloud Storage Services, Worldwide
Raj Bala, Arun Chandrasekaran, John McArthur, July 24, 2017
Por exemplo: O Amazon S3 tem trilhões de
objetos com picos de milhões de requests por
segundo
TEMPO
OBJETOSDE
CLIENTES
Confiabilidade em escala

8. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
3 tipos de storage
Arquivo ObjetoBloco

9. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
3 tipos de storage
Arquivo
Dados guardados com arquivos
numa hierarquia de diretório
Compartilhado através da rede

10. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
3 tipos de storage
Bloco
Dados guardados como
blocos em disco(s)
Conectado localmente

11. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
3 tipos de storage
Objeto
Dados guardados como objeto
identificado por uma chave em
espaço plano
API simples para colocar (put),
pegar (get) e apagar (delete) com
base na chave

12. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Performance dos vários tipos de storage
File
Object
Block
Latency
Throughput

13. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Transferência de dados
OnlineOffline
Segurança e gestão
de dados
Portfólio completo de soluções de storage
Amazon
EFS
Amazon
EBS
Família AWS Snow
AWS Storage Gateway
AWS Direct Connect
Amazon EFS File Sync
Amazon S3
Transfer Acceleration
Parceiros
Amazon Kinesis
Data Streams
Amazon Kinesis
Video Streams
Amazon
S3
Amazon
Glacier
AWS KMS
AWS IAM
Amazon CloudWatch
AWS CloudTrail
AWS CloudFormation
AWS Lambda
Amazon Macie
Amazon QuickSight

14. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Storage de bloco

15. Storage de
bloco da AWS
Storage
Instância
EC2
io1gp2
EBS
SSD
sc1st1
EBS
HDD
HDDSSD

16. O que é o storage da instância Amazon EC2?
EC2 instances • Local na instância
• Não persistente
• Dado não replicado (default)
• Não suporta snapshot
• SSD ou HDD
Physical host
Instance store
or

17. Storage da instância EC2 Vs. EBS
• Local na instância
• Não persistente
• Dado não replicado (default)
• Não suporta snapshot
• SSD ou HDD (pré-definido)
• Persistente
• 99.999% de disponibilidade
• Automaticamente replicado dentro
da Zona de Disponibilidade (AZ)
• Snapshot com Point-in-time
• Mudança do tipo de volume
• SSD ou HDD
EBS Storage da instância EC2

18. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
A história do EBS

19. O que é o EBS?
EBS
volume
EC2
instance
• Storage de bloco as a service
• Crie, atache volumes através de API
• Serviço acessado pela rede

20. EBS não é como o volume de disco do seu datacenter
EC2
instance
!=
EBS
volume

21. O dados do EBS estão replicados
EC2
instance
EBS
volume

22. Persistência e flexibilidade do EBS
EC2
instance
• Volume persiste independente
da instância EC2
• Selecione o storage e a
instância de acordo com a sua
aplicação
• Desatache e atache de
instâncias dentro da mesma AZ
Availability Zone
AWS Region
EBS
volume

23. Persistência e flexibilidade do EBS
EC2
instance
• Volume persiste independente
da instância EC2
• Selecione o storage e a
instância de acordo com a sua
aplicação
• Desatache e atache de
instâncias dentro da mesma AZ
Availability Zone
AWS Region
EBS
volume

24. Atachando vários EBS na instância EC2
EC2
instance
• Volume atacha em uma
instância de cada vez
• Muitos volumes podem ser
atachados a uma instância
• Separe volumes de boot
dos de dadosEBS
volume
(boot)
EBS
volume
(data)
EBS
volume
(data)
Availability Zone
AWS Region

25. A replicação do volume EBS é nativa
EBS
volume
Availability Zone
AWS Region
Replica

26. O EBS foi projetado para
99.999% de disponibilidade
0.1% a 0.2% de taxa de falha anual (AFR)
(Vs. 1%~2% de um HD convencional)

27. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Tipos de volumes EBS

28. Tipos de volumes EBS
Solid-State Drives (SSD) Hard Disk Drives (HDD)

29. Tipos de volumes EBS
SSD
Provisioned IOPS
SSD
io1
General Purpose
SSD
gp2
Throughput Optimized HDD
st1 sc1
Cold HDD
HDD

30. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
ou
Escolhendo o tipo de volume EBS
O que é mais importante na sua aplicação?
IOPS Throughput?

31. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Tipo de volume EBS: General Purpose SSD (gp2)
gp2
Throughput: 160MiB/s
Latência: Um dígito de ms
Capacidade: 1 GiB a 16 TiB
Baseline: 100 IOPS + 3 IOPS por GB, até 10k IOPS
Burst: 3k IOPS (para volumes até 1 TiB)
Ótimo para volumes de boot, aplicações de baixa latência e
banco de dados com bursts
General Purpose SSD

32. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Tipo de volume EBS: I/O Provisionado
Provisioned IOPS SSD
io1
Baseline: 100 a 32,000 IOPS
Throughput: 500 MiB/s
Latência: Um dígito de ms
Capacidade: 4 GiB a 16 TiB
Ideal para apliações críticas e bancos de dados com IOPS permanente

33. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Tipo de volume EBS: Throughput Provisionado
st1
Baseline: 40 MiB/s por TiB, até 500 MiB/s
Capacidade: 500 GiB a 16 TiB
Burst: 250 MiB/s por TiB, até 500 MiB/s
Ideal para blocos grandes, aplicação sequencial com alto throughput
(MapReduce, Kafka, data warehouse e ETL)

34. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
sc1
Tipo de volume EBS: Throughput Provisionado
Cold HDD
Baseline: 12 MiB/s por TB, até 192 MiB/s
Capacidade: 500 GiB a 16 TiB
Burst: 80 MiB/s por TB, até 250 MiB/s
Ideal para aplicação de throughput sequencial, como logs e backup

35. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Throughput
é mais importante
Pouco I/O, aleatório Muito I/O, sequencial
O que é mais importante?
Latência?
i3
gp2 io1 sc1 st1
d2
Escolhendo o tipo de volume EBS
IOPS
≤ 80,000> 80,000
< 1 ms Um dígito de ms ≤ 1,250 MiB/s
Throughput?
> 1,250 MiB/s
é mais importante
Custo Performance
O que é mais importante?
Custo Performance

36. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Volumes com I/O Provisionado Volumes com Throughput Provisionado
sc1st1io1gp2
$0.10 por GiB $0.125 por GiB
$0.065 por PIOPS
* Todos os preços por mês, pro-rata por hora e na região us-west-2
$0.045 por GiB $0.025 por GiB
Snapshot dos volumes = $0.05 por GiB por mês

37. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
EBS elastic volumes

38. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Elastic volumes – Propriedades
• Aumento do tamanho do disco
• Troca do tipo de volume
• Aumento/Diminuição de IOPS
provisionados
*Modificações do volume precisam ser válidos no volume final

39. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Elastic volumes – tipos de volumes suportados
Provisioned IOPS
SSD
General Purpose
SSD
Throughput Optimized
HDD
Cold
HDD
io1 st1 sc1gp2

40. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Elastic volumes – alterar IOPS provisionados
io1
aumentar diminuir

41. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Elastic volumes – aumentar o tamanho do volume
gp2
gp2
io1
io1
st1
st1
sc1
sc1

42. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Diminuição do tamanho do volume?
gp2
gp2
sc1
sc1
io1
io1
st1
st1

43. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Troca de tipo e tamanho do volume
gp2 sc1io1 st1
gp2 sc1io1 st1

44. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Criptografia EBS

45. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
O que é criptografia EBS?
Criptografia
• Atache criptogrados e não criptografados
• Sem impacto na performance do volume
• Qualquer instância da geração atual
• Suportado em todos os tipos de EBS
• Snapshots também criptografados
• Sem custo extra
• Volumes de boot e dados podem ser
criptografados

46. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
EBS snapshot

47. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
O que é o EBS snapshot?
EBS
volume
Availability Zone
AWS Region
Amazon
S3
Availability Zone
Replica
EBS snapshot

48. Como funciona o EBS snapshot?
• Backup point-in-time dos blocos alterados do
volume
• Armazenado no S3
• Snapshots seguintes são incrementais
• Apagar um snapshot somente remove os dados
exclusivos daquele snapshot
EBS
volume
EBS
snapshot

49. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Usando o snapshot para (re)criar instâncias
EBS
volume
Availability Zone
AWS Region
EBS snapshot
EC2 instance
Amazon
Machine
Image
(AMI)

50. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Usando o snapshot para replicação em outra região AWS
EBS
volume
Availability Zone
AWS Region
Amazon
S3
EBS snapshot
EBS
volume
Availability Zone
AWS Region
EBS snapshot
Replica Replica

51. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Storage de objeto

52. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Amazon Simple Storage Service (S3)
Projetado para
99.999999999% de
durabilidade
Compliance
Opções de replicação para
outras regiões
Diferentes formas de
mover os dados (in/out)
Segurança para ajudar o
CISO
Ferramentas automáticas
para diminuir o custo
On-demand analytics
Suporte native a
expressões SQL com S3
Select
Dados detalhados de
perfis de uso e acesso
Colete AnaliseGuarde

53. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Amazon Glacier
Projetado para
99.999999999% de
durabilidade
Opções de replicação em
outras regiões
Compliance
Ferramentas de
locking, criptografia,
auditoria e alertas
Query-in-place
analytics
Recuperação rápida ou
em alto volume
ArquivoSegurança Custo

54. Classes de storage de objeto AWS
GlacierS3 Standard
S3 Standard -
Infrequent Access
Regras automáticas do ciclo de vida do dado
S3 One Zone -
Infrequent Access
Dados ativos
Acesso em ms
Min 3 AZs
$0.023
Arquivo
Minutos a Horas
Min 3 AZs
$0.004
Duração minima de 30 dias
Acesso em ms
Min 3 AZs
$0.0125
Duração minima de 30 dias
Acesso em ms
Min 1 AZ
$0.01
Preço por GB por mês na região de US East (N. Virginia)

55. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Como as classes de storage de objeto diferem entre si?
Availability Zone
Availability Zone
Availability Zone
S3 Standard
S3 Standard-IA
Glacier
Availability Zone
S3 One Zone-IA
Região AWS RegiãoAWS

56. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
projetado para
99.99%
durabilidade
2 cópias em 1 site
projetado para
99.999%
durabilidade
Cópias em 2 sites
projetado para
99.999999999%
durabilidade
GlacierStandard IA
Região AWS
Entendendo Durabilidade

57. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Movimentação de dados em grande
escala

58. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
O que é o Snowball e por
que o criamos?
AWS Snowball AWS Snowball Edge
Mover grandes volumes de dados pela Internet pode
levar anos – A AWS envia um equipamento físico seguro
para você transferir os seus dados e retorná-lo para
importação direta na AWS.
A nuvem nem sempre é acessível de locais remotos
onde a conectividade é limitada ou intermitente –
instale um equipamento robusto na borda com storage
e computação local para processor dados sem depender
de rede.
Envio tradicional de HDs é trabalhoso e sujeito a falhas –
Etiqueta de envio E-ink e rastreabilidade simplifica a
logística em escala.

59. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
AWS Snowball AWS Snowball Edge AWS Snowmobile
• 50 ou 80TB de storage
• 10 GE de rede
• Criptografia fim-a-fim
• Robustez (8.5G de impacto)
• Resistente a intempéries
• 100TB de storage
• 10/25/40 GE de rede
• Criptografia fim-a-fim
• Robustez (8.5G de impacto)
• Resistente a intempéries
• Suporte a AWS Greengrass para
computação, mensagem e
caching local
• Suporte a Amazon EC2/AMI para
edge compute
• Escala de Exabyte em um
container de 45 pés
• Criptografia fim-a-fim
• Time de segurança dedicada
• Rastreamento via GPS,
monitoramento de alarme,
monitoramento 24x7 e segurança
adicional opcional
Família AWS Snow
© 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.

60. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Detalhes e especificações da família Snow
Storage 50 ou 80 TB 100 TB 100 PB
Interfaces CLI, S3 SDK S3, NFSv4 NFSv4
Rede 10G 10/25/40G 40/100G
Energia 200W 400W ~350kW
Computação NA m4.4xl (equivalente) NA
Custo do Job
(Import)
$200 ou $250 por job $300 por job $0.005/GB por mês
Custo diário $15/dia depois do 10o dia $30/dia depois do 10o dia NA
Snowball Snowball Edge Snowmobile

61. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Você precisa do caminhão?
< 10PB > 10PB

62. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Arquiteturas híbridas de storage
com AWS Storage Gateway

63. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Qual é o problema?
Você tem muitos dados on-premises…
…E quer…
• Usar a nuvem
• Manter acesso rápido ao seu dado
Dados
existentes
Novos dados

64. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Isto parece familiar?
Expansão do espaço
para Storage
Aumento da
complexidade para
guardar dados
Custos crescentes do
Storage on-premises

65. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
O AWS Storage Gateway possibilita vários casos híbridos
Backup | DR | Archive
Enterprise data centers
Amazon
EBS
Amazon
S3
Amazon
Glacier
App serversFile servers
Research sites
AWS Storage Gateway
DevicesDatabasesMultimedia content
Analytics | File Services | Machine Learning | Processamento de Dados
Distribuição de Dados | Backup | DR | Arquivo | Migração
Amazon
EC2
AWS
Lambda
Amazon
CloudFront
Amazon
Athena
Amazon
EMR
Backup serversUsers
Remote offices Small to medium businesses
Amazon
Rekognition
Amazon
MachineLearning

66. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
AWS Storage Gateway
Amazon EC2
IAM
Amazon
CloudWatch
AWS Key Management
Service (AWS KMS)
AWS CloudTrail
Files
(NFS / SMB)
Volumes
(iSCSI)
Fitas
(iSCSI VTL)
Amazon S3
Amazon Glacier
Amazon EBS
snapshots
Região AWSSeu Datacenter
Storage Gateway
HTTPS
Gateway Service

67. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Família AWS Storage Gateway
File gateway
Guarde e acesse objetos no Amazon S3 através de aplicações
“file-based” com caching local
Volume gateway
Storage de bloco on-premises replicado na AWS com caching
local, snapshots do Amazon EBS e clones
Tape gateway
Substituição de fita física usando AWS e caching local

68. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Protocolos de storage
padrões
Storage da AWS acessível sem alterar
aplicações
Cache 100% gerenciado
Dados de uso mais frequente com cache local
para acesso com baixa latência
Storage Durável
Dados de aplicação on-premises nativamente
guardados no Amazon S3, Amazon Glacier e
Amazon EBS snapshots
Principais características do AWS Storage Gateway
Transferência de dados
Otimizada
Upload seguro de dados alterados e download
de dados requisitados

69. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Arquitetura híbrida para File Gateway

70. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
File Gateway
Guarde e acesse objetos no Amazon S3 pelas aplicações “file-based” com caching local
Datacenter do cliente
HTTPS
NFS v3/v4
SMB v2/v3
File Gateway Objetos no
bucket S3
Servidor
de
Aplicação
Opções de compartilhamento por arquivo
IAM role
Classe de storage de objeto
Criptografia com AWS KMS
Etc...
Opções por bucket S3
Restrição de acesso por client IP (NFS) ou Active
Directory (SMB) users/groups
Permissões POSIX para acesso no nível de objeto*
Read-only/read-write
* Subset de compatibilidade do NTFS

71. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
s3://{bucket name}/{diretorio1}/{arquivo1}
s3://{bucket name}/{diretorio1}/{arquivo2}
s3://{bucket name}/{diretorio1}/{arquivo3}
…
s3://{bucket name}/{diretorio2}/{arquivo1}
s3://{bucket name}/{diretorio2}/{arquivo2}
File Gateway
Mapeamento de 1:1 entre arquivos e objetos
nfs://{IP}/{share name}/{diretorio1}/{arquivo1}
nfs://{IP}/{share name}/{diretorio1}/{arquivo2}
nfs://{IP}/{share name}/{diretorio1}/{arquivo3}
…
nfs://{IP}/{share name}/{diretorio2}/{arquivo1}
nfs://{IP}/{share name}/{diretorio2}/{arquivo2}
Gateway de Arquivo
Cliente NFS Objetos no
Amazon S3

72. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Arquitetura híbrida para Volume
Gateway

73. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Gateway de Volume
• Armazenamento de bloco na nuvem exposto como local
• Até 1 PB de storage por Gateway
• Recupere seus volumes de forma flexível via snapshots
Servidor de
aplicação
Snapshots
do Amazon
EBS
Gateway de
Volume
Volume
armazenado no
Amazon S3
HTTPSiSCSI
Cliente

74. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
No modo Cached, uma cópia completa do volume é armazenado na AWS,
e o dado quente fica disponível localmente
Snapshots
do Amazon
EBS
HTTPSiSCSI
Cliente
Gateway de
Volume
Servidor de
aplicação
Volume
armazenado no
Amazon S3
Gateway de Volume – Modo Cached
100% do volume
armazenado na AWS
Volume virtual Blocos acessados
frequentemente ficam no cache

75. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Snapshots do Amazon EBS
Amazon CloudWatch
Cliente
iSCSI
Gateway de Volume
Upload buffer
Volume
Cache
VolumeServidor de
aplicação
Gateway de Volume – Modo Cached
Tamanho dos volumes?

76. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Gateway de Volume – Modo Cached
Operações de escrita

77. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Snapshots do Amazon EBS
Amazon CloudWatch
Cliente
iSCSI
Gateway de Volume
Upload buffer
Volume
Cache
Cliente escreve no gateway, que primeiramente
popula o cache
Servidor de
aplicação
Gateway de Volume – Modo Cached
Operações de escrita
Volume

78. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Snapshots do Amazon EBS
Amazon CloudWatch
Cliente
iSCSI
Gateway de Volume
Upload buffer
Volume
Cache
Servidor de
aplicação
Gateway de Volume – Modo Cached
Operações de escrita
Volume
A escrita é então copiada para o buffer

79. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Snapshots do Amazon EBS
Amazon CloudWatch
Cliente
iSCSI
Gateway de Volume
Upload buffer
Volume
Cache
O dado comprimido é então enviado para o Amazon S3 via HTTPS
Servidor de
aplicação
Gateway de Volume – Modo Cached
Operações de escrita
Volume

80. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Gateway de Volume – Modo Cached
Operações de leitura

81. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Snapshots do Amazon EBS
Amazon CloudWatch
Cliente
iSCSI
Gateway de Volume
Upload buffer
Volume
Cache
Se o bloco está no cache, ele será lido direto dele
Servidor
de
aplicação
Gateway de Volume – Modo Cached
Operações de leitura
Volume

82. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Snapshots do Amazon EBS
Amazon CloudWatch
Cliente
iSCSI
Gateway de Volume
Upload buffer
Volume
Cache
Servidor
de
aplicação
Gateway de Volume – Modo Cached
Operações de leitura
Volume
Se o bloco não está no cache, o gateway requisita o bloco e o popula
no cache local

83. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Snapshots do Amazon EBS
Amazon CloudWatch
Cliente
iSCSI
Gateway de Volume
Upload buffer
Volume
Cache
Servidor
de
aplicação
Gateway de Volume – Modo Cached
Operações de leitura
Volume
O gateway então retorna o bloco que está no cache

84. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Gateway de Fita

85. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Gateway de Fita
• Fácil adoção de nuvem: fita virtual no Amazon S3 e no Amazon Glacier, acessadas via Gateway
• Seguro e eficiente: dados comprimidos e criptografados em trânsito e armazenados
• Escalável: capacidade ilimitada de armazenamento; até 1-PB por gateway
• Confiável: recuperação em 3–5-horas do Amazon Glacier com 99.999999999% durabilidade
• Baixo custo: custos previsíveis de armazenamento e redução de esforços em gestão
Media changer
Armazenamento
no
Amazon S3
Arquivamento no
Amazon Glacier
Servidor
de
backup
iSCSI
Gateway de Fita
Tape drive
HTTPS
Cliente
Armazene suas fitas virtuais no Amazon S3 e no Amazon Glacier com VTL
Cache
local

86. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Gateway de Fita: Substituição de fitas
• Emula uma biblioteca de fitas; fitas virtuais no Amazon S3 e Amazon Glacier
• Funciona com os aplicativos mais comuns de backup
• Baixo custo: Custos previsíveis e gerenciamento reduzido

87. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Gateway de Fita: Como o VTL funciona
Datacenter do cliente
Região
Storage Gateway
Servidor de
Backup
Upload buffer
Cache
Media
changer
Tape drive
Tape drive
Tape drive
Tape drive
Tape drive
Tape drive
Tape library
(Amazon S3))
Tape shelf
(Amazon Glacier)
• Emula o equipamento de fita física com drives e media changer
• Escalável: Storage na AWS virtualmente ilimitado
• Fitas virtuais gravadas no S3: Dado está no S3 quando a fita está no drive ou slot
• Fitas virtuais ejetadas são marcadas como “read only” e movidas para “tape shelf” no Glacier
• Recuperação: Recupere fitas para a biblioteca (3–5 horas) e leia o dado no mesmo ou outro
gateway
Tape gateway VM
Tape drive

88. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Gateway de Fita: Comparação de custo, Exemplo de cliente
Todo mês, 100 TB escrita e recuperação de 1 fita; retenção de 1 ano
Tape gateway
Data written via
gateway
Data transfer out
and tape retrieval
On-premises tape
$34.5 K / year
Virtual tapes archived
in Amazon Glacier
Admin time
Admin time
Tape library
maintenance
Robotic tape library
Tape media costs
Offsite archive
service
$56.8K / year

89. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Backup & Restore Archive Primary Storage BC/DRData Migration
Parceiros da AWS para Migração e Storage

90. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Revisão do que vimos hoje
Storage de bloco na AWS (EBS)
Storage de objeto na AWS (S3 e Glacier)
Movimentação de grandes volumes de dados para AWS
(Snowball)
Arquiteturas híbridas para storage (Gateway: File, Volume,
Fita)

91. © 2018, Amazon Web Services, Inc. or its affiliates. All rights reserved.
Obrigado!