O documento discute a transição de novos produtos para a produção usando arquitetura serverless. Ele apresenta os desafios de times pequenos com diferentes produtos em fases variadas e em locais diferentes. Explora as vantagens da arquitetura serverless como custo sob demanda, disponibilidade e escala, mas também possíveis restrições e custos. Detalha como serviços como Lambda, DynamoDB, S3 e outros podem ser usados e os cuidados ao mover sistemas complexos para a produção nessa arquitetura.

1. DataLab | ©SerasaExperian 1
Do nada a Produção usando
Arquitetura Serverless
André “Xico” Souza
Data Engineer

2. DataLab | ©SerasaExperian 2
Agenda
• Contexto
• Novos Produtos
• Desafios
• Arquiteturas Serverless
• Indo para Produção

3. DataLab | ©SerasaExperian 3
Contexto
• Welcome to DataLab
• Ambiente
• Lanches
• Jogos
• P&D
• Evolução
• Manutenção
• Custos $$

4. DataLab | ©SerasaExperian 4

5. DataLab | ©SerasaExperian 5
Novos Produtos

6. DataLab | ©SerasaExperian 6
Novos Produtos
Ideia
PoC
Novas Funcionalidades
Transição
Produção

7. DataLab | ©SerasaExperian 7
Novos Produtos
• Liberdade de Tecnologias
• Monitoração e Operação
• Projetos Globais
• Ambiente Corporativo
– Compliance
– Regulamentações
– Auditorias Externas*
– Pentests*

8. DataLab | ©SerasaExperian 8
Desafios

9. DataLab | ©SerasaExperian 9
Desafios
• Times pequenos
• Diferentes produtos em diferentes fases
• Disponibilidade
• Em diferentes locais
• Custo

10. DataLab | ©SerasaExperian 10
Arquiteturas Serverless

11. DataLab | ©SerasaExperian 11
Arquiteturas Serverless
“There is no Cloud. It is just someone else’s computer”
“There is no serverless.
It is just someone else’s container”
PERSON, Some Smart. 2010’s

12. DataLab | ©SerasaExperian 12
Arquiteturas Serverless
Pros
• Custo sob Demanda
• Disponibilidade
• Escala
• Automação
• Administração
Cons
• Restrições quanto as
tecnologias
• Custo *

13. DataLab | ©SerasaExperian 13
Arquiteturas Serverless
Imaginemos um Sistema de Cadastro de usuários

14. DataLab | ©SerasaExperian 14
Arquiteturas Serverless
SAM - Serverless Application Model
Source: https://github.com/awslabs/serverless-application-model

15. DataLab | ©SerasaExperian 15
Arquiteturas Serverless
Storage: DynamoDB
• Chave/Valor e Documento
• Escalável
• Segurança
• Backup
• $$

16. DataLab | ©SerasaExperian 16
Arquiteturas Serverless
Storage: S3
• “O S3 é seu amigo”
• “Na dúvida, sobe no S3”
• EMR (Elastic MapReduce)
• Política de transição entre classes de storage
– Standard $
– Glacier $
– Glacier Deep Archive $
• Uso inter regiões pode tornar o serviço caro

17. DataLab | ©SerasaExperian 17
Arquiteturas Serverless
FileServer: S3
• Um bucket pode ser exposto via URL
• Conteúdo estático de páginas web
• Domínio customizado
• Apenas HTTP

18. DataLab | ©SerasaExperian 18
Arquiteturas Serverless
Execução: Lambda
• Java, Python, NodeJs ....
• Tarefas pontuais
• Será?
• Bilhetagem
– Requisições: # de requisições
– Execução: GB * Segundos
• Free tier
– 1MM requisições
– 400.000 GB-segundo

19. DataLab | ©SerasaExperian 19
Arquiteturas Serverless
Execução de Serviços mais complexos: Lambda
• Executam dentro containers
• O que acontece quando uma request é concluída?
• Cold Starts
– Pior no mundo JVM
• Heart Beat vs Marca-passo
• CloudWatch Event
• PoCs e Sistemas com poucos usuários
• Reavaliar estratégia quando o projeto ganhar tração

20. DataLab | ©SerasaExperian 20
Indo para Produção

21. DataLab | ©SerasaExperian 21
Indo para Produção

22. DataLab | ©SerasaExperian 22
Indo para Produção
Serverless
MoreServers

23. DataLab | ©SerasaExperian 23
Indo para Produção
• Estimativa de Uso
• Automações
• Outras soluções
– RDS
– Elastic Beanstalk
– ECS, EKS
• Reserved Instances vs Spot Instances

24. DataLab | ©SerasaExperian 24
Do nada a Produção usando
Arquitetura Serverless
André “Xico” Souza
andre.Souza@br.experian.com

25. DataLab | ©SerasaExperian 25
@datalab.experian
Serasa Experian DataLab
Follow us!
www.datalabserasaexperian.com.br