O documento descreve uma arquitetura serverless usando API Gateway, Lambda e Kinesis para lidar com alta demanda de requisições. A solução anterior usava EC2 e enfrentava problemas de custo, perda de dados e lentidão. A nova arquitetura distribui a carga em serviços sob demanda da AWS para melhor escalabilidade, desempenho e custo.

1. Processando alta demanda de
requisições com os serviços API
Gateway, Lambda e Kinesis
Flávio Pimenta

2. Problema: atender todo mundo !!

3. Arquitetura na época

4. Problemas
Custo04 min 5 e máx de 20 EC2
Perda de dados03 erros 50x (500, 502,504)
Banco de dados02 sobrecarga e lentidão
Autoscaling01 alguns picos durante o dia

5. Ideias para nova solução
Custo04
usar mais serviços sob
demanda em vez de EC2
Perda de dados03 "represar"
Banco de dados02 "gravar devagar"
Autoscaling01 serverless

6. Nova solução

7. API Gateway
Monitoramento
Performance
Rate limit (req/s)

8. Lambda
Escalabilidade
Performance
Python (cold start)
Custo por requisição

9. Queue vs Stream

10. Kinesis
Stream de dados
Escala com shards
Alta Performance
(~1000 rps/shard)
Baixo custo

11. Worker Java como task no ECS
Consome Kinesis
Grava em lote no DB
Migrado para docker
Deploy 1 task no ECS

12. Nova solução

13. Ferramenta para testes de performance:
● https://github.com/locustio/locust
● Utiliza Python !
● Escalável

14. Escrita do teste

15. Execução
locust -f locustfile.py --host=endpoint-aplicacao
http://localhost:8089

17. Monitoramento API Gateway

18. Uso em 1 dia, acumulado por hora

19. Fonte de exemplos!!
https://github.com/awslabs

20. Participe do AWS User Group Campinas!!

21. sensedia.com
flavio@pimenta.dev
github.com/flap
Flávio Pimenta