1) O documento discute diferentes casos de uso e modelos de dados para bancos NoSQL, comparando-os com bancos relacionais. 2) São apresentados exemplos de como modelar logs de aplicação, hierarquias de comentários, documentos com alterações históricas e integração entre aplicações usando bancos do tipo documento, coluna e grafo. 3) O documento conclui comparando os modelos de dados, complexidade de queries e trade-offs entre SQL e NoSQL.

1. Por que e quando usar? Nico Steppat [email_address] @steppat

2. - Desenvolvedor - Instrutor - Blogger - Engenheiro - Carioca (quase) - Apaixonado pelo NoSQL Quem sou eu?

4. vs

5. Eierlegendewollmilchsau vs

6. Web scale

7. (Dr. Brewer) consistência disponibilidade

8. Web scale disponibilidade consistência

9. Tolerancia à partição na rede Teorema CAP Web scale consistência disponibilidade

10. facebook ?

11. facebook SQL – Modelo relacional – ACID – APIs Maduro – Robusto – Conhecido - Barato SQL – Rocks!

12. MAS? facebook “ Quando tudo o que você tem é um martelo, todos os problemas parecem pregos” (sabedoria popular)

13. facebook “ Quando tudo o que você tem é um martelo, todos os problemas parecem pregos” (sabedoria popular)

14. NoSQL == facebook Persistência-poliglota

15. facebook

16. SQL: like '%restaurante%' like '%restaurante%' or '%festa%'

17. facebook

18. facebook -> Buscas aproximadas -> Rankear (ranking) -> Buscas dinâmicas

19. facebook Document-Store #1 (Fulltext-search engine)

20. Onde gravar os logs da aplicação?

21. db.createCollection("userlog", {capped: true, size:100000}) { "event":"userlog", "userid":"12573", "priority" : "WARN", "data": "07 Nov 2011", "time": "15:17:50,343", "class":"VendaController", "method":"removerVenda", "message":"permissão negada" } Document-Store #2 Capped Collections

22. Como modelar uma hierarquia no banco?

23. Artigo - NoSQL Comentário Comentário Comentário Comentário Comentário Como modelar uma hieraquia no banco?

24. No Banco Relacional? tbl comentarios --------------- id parent_id autor mensagem 1 0 João "Não entendi o teorema CAP." 2 1 Maria "Dá uma olhada ….." 3 2 João "Vlw. Pela dica." 4 0 Pedro "Bem interessante!"

25. { id: "4c6b9456f61f000000007ba6" comments: [ {author: "João", message: "Não entendi o teorema CAP.", replies: [ {author: "Maria", message: "Dá uma olhada no blog da Caelum.", replies: [ {author: "João", message: "Vlw pela dica!", replies: [] }] }] }] Document-Store #3

26. Dados quentes Dados frios

27. Alterações no esquema? Dados quentes Dados frios

28. Alterações no esquema não devem atrapalhar! Dados quentes

29. { "id": "324", " venda ": { "data": "07 Nov 2010", "valor": "2700,00" }, " cliente " : { "cnpj":"123-345-5678/0004", ...} " produto " : { "Notebook":"Toshiba ", "Model":"Satelite AAC-345", ...} } { "id": "567", " venda " : { "data" : "08 Abr 2011", "valor" : "3400,00" }, " cliente " : { "cnpj" : "123-345-5678/0004", ...} " pedido " : { "quantidade" : "2", " produto " : { "Notebook":"Sony ", "Model":"Vaio LAB-45", … } } Alterações no esquema não devem atrapalhar! Document-Store #4 Documento Venda Documento Venda com pedido

30. Onde gravar o histórico dos dados quentes ? tbl pedidos ----------- id cliente_id produto_id qtd data 243 432 154 03 22/10/2011 tbl pedidos ----------- id cliente_id produto_id qtd data 243 432 154 10 09/11/2011 Alteração do registro

31. Tbl pedidos ----------- id cliente_id produto_id qtd data 243 432 154 10 09/11/2011 { id : "243", changes : { 1300700615678 : { "cliente_id" : "432", "produto_id" : "154" "qtd" : "3", "data" : "22/10/2011" } 1320760617815 : { "qtd" : "10", "data" : "09/11/2011" }, } } Document-Store #5

32. Relaxarrrrrr

33. Como relaxarrrrrr?

34. Trabalho offline Master Master

35. Sincronização Conflict management CouchDB – offline por padrão

36. Lembrando: -> Escalabilidade extrema -> Document-stores -> p/ dados semi-estruturados -> alterações no esquema -> offline work Ex. Buscas, Logs, Arquivar, Histórico, Relaxarrr

37. Arquivar dados frios e analisar Dados quentes

38. Como analisar os dados frios ? tbl pedidos ----------- id cliente produto qtd data 1 João Sony Vaio 4 03/10/2011 2 Maria Toshiba Sat. 3 08/11/2011 3 Pedro Macbook Pro 5 10/11/2011 colunas pedidos --------------- Ids: 1;2;3 Clientes: João;Maria;Pedro Produtos: Sony Vaio;Toshiba Sat.;Macbook Pro Qtd: 4;3;5 Data: 03/10/2011;08/11/2011;10/11/2011

39. Row-based vs Column-based OLTP vs OLAP

40. Arquivar para analisar Column-stores

43. e vários outros ... Queries: Map/Reduce, Hive e Pig

44. Como modelar um grafo?

45. Como modelar um grafo? Será que o MODELO RELACIONAL é bom pra isso?

46. Como modelar um grafo? http://www.slideshare.net/emileifrem/neo4j-presentation-at-qcon-sf-2008-presentation NeoService banco = ... Node mrAnderson = banco.createNode(); mrAnderson.setProperty("name", "Anderson"); Node morpheus = banco .createNode(); mrAnderson.setProperty("name", "Morpheus"); mrAnderson. createRelationshipTo (morpheus, RelTypes.AMIGAO); AMIGÃO

49. e vários outros ...

50. Lembrando: -> Column stores -> para dados estruturados -> para análise -> Graph databases -> relacionamentos complexas

51. Arquitetura Web-App

53. ID: A628B665D8989C03 Key - Value

54. Key-Value NO BANCO RELACIONAL?

55. ID: A628B665D8989C03 Key - Value Store! Key-Value-Store #1

56. Key-Value-Store #1

57. http://www.caelum.com.br/apostilas/ Onde ficam as apostilas abertas? Onde ficam as apostilas PERSISTIDAS?

58. Key-Value-Store #2 s3ObjectStore.store("FJ-11.pdf", new File("fj-11.pdf"), "apostilas");

59. Como fazer integração entre aplicações?

60. Integracão entre aplicações COM BANCO RELACIONAL?

61. Key-Value-Store #3 Serviço de mensagens com NoSQL HTTP POST Http://localhost/q/pedidos HTTP GET Http://localhost/q/pedidos

62. Resumo: -> Escalabilidade -> distribuição de dados -> replicação -> modelo de consistência -> gerenciamento de conflitos

63. Resumo: -> Ferramenta específica -> cache / backup / histórico -> busca textual -> arquivar e analisar -> offline -> integração

64. Resumo: -> Modelo de dados Estrutura Chave-Valor Documentos Colunas Grafo Complexidade Queries

66. Key-Value-Store #3 Integração entre aplicações

68. Esquema relacional Schema-free, semi-structured

69. Integridade referencial, Joins Aplicação faz

70. ACID TX Local, Revision, Consensus SQL