Baixar para ler offline
Carregado porFabrício Catae
Como funciona um banco de dados? (Prudente TechDay 2010)
O documento apresenta os principais conceitos de banco de dados relacionais, incluindo como o SQL Server processa consultas, gerencia armazenamento de dados e controla transações de forma a garantir propriedades ACID. É descrito o funcionamento interno de componentes como o otimizador de consultas, gerenciador de buffer e controle de transações.
Mais conteúdo relacionado
Semelhante a Como funciona um banco de dados? (Prudente TechDay 2010)
Como funciona um banco de dados? (Prudente TechDay 2010)
- 1. 2 Inside SQL Server Comofunciona um banco de dados? Fabricio Catae (Microsoft) Premier Field Engineer Microsoft Certified Master Twitter: @fcatae WebSite: http://blogs.msdn.com/fcatae/
- 2. PrudenteTechDay |2010 Como comecei... Escola Politecnica(USP) 1998-2002 – Engenharia Elétrica Carreira(Estagiário) 1999 – Gerente de Projeto (Poli Jr) 2000 – Programador (Flexsys) 2001 – Estagiário (Microsoft Consulting Services) 2002 – Field Engineer (Microsoft Premier Support) Certificações Microsoft Importantes MS Certified Solution Developer (C++ for Windows) MS Certified Database Administrator (SQL Server 2000)
- 3. PrudenteTechDay |2010 Introdução Database Administrator (DBA) Comparação Sitede Busca e Banco de Dados
- 4. PrudenteTechDay |2010 Banco de Dados(Database) O que é um Banco de Dados? Coleção de dados Exemplos de Banco de Dados Relacional Microsoft SQL Server Oracle DB2 Sybase MySql
- 5. PrudenteTechDay |2010 Busca x Consulta Buscapor palavras específicas “Ruas Cidade Presidente Prudente” “Empregos Diretor Salário 30000 ou mais” Consulta por informações Ruas (Cidade = Presidente Prudente) Empregos (Cargo = Diretor, Salário > 30000)
- 6. PrudenteTechDay |2010 Site de Busca Issoé um banco de dados relacional? Retorna resultados para a busca Mas, Não estruturado Não modifica dados Não consolida resultados Não permite fazer consultas complexas
- 7. PrudenteTechDay |2010 Agenda Introdução Parte I –Características Escalabilidade Alta Disponibilidade Parte II – Inside SQL Server Query Optimizer Buffer Manager Transaction Manager
- 8. PrudenteTechDay |2010 Parte I –Visão Geral Características Escalabilidade Redundância Alta Disponibilidade Segurança e Auditoria Controle de Concorrência
- 9. PrudenteTechDay |2010 Escalabilidade Aumento de Recursosé proporcional ao aumento de Desempenho Exemplos: Sistema escalável em relação ao número de CPU Aplicação Web escala com o aumento de servidor Existe um limite do ganho em desempenho em relação ao aumento de recurso
- 10.
- 11.
- 12. PrudenteTechDay |2010 Escalabilidade Nome = ‘P1’,Tel = ‘555-5555’ Nome = ‘P2’, Tel = ‘555-5556’ Nome = ‘P3’, Tel = ‘555-5557’ Nome = ‘P4’, Tel = ‘555-5558’ Nome = ‘P5’, Tel = ‘555-5559’
- 13. PrudenteTechDay |2010 Gerenciamento de Recursos Responsabilidades Priorizaratividades de Sistema Distribuição de Tarefas Alocação de Memória Dinâmica Transferência de Disco “Quase” um Sistema Operacional
- 14.
- 15. PrudenteTechDay |2010 Recursos de Máquina RecursosTípicos Processador Memória RAM Disco Placas HBA Placas de Rede
- 16. PrudenteTechDay |2010 Alta Disponibilidade Problemas Acontecem Implementarredundância Identificar pontos de falha Servidor (Hardware) Comunicação de Rede (Network) Armazenamento de dados (Disco)
- 17. PrudenteTechDay |2010 Nome = ‘P1’,Tel = ‘555-5555’ Nome = ‘P2’, Tel = ‘555-5556’ Nome = ‘P3’, Tel = ‘555-5557’ Nome = ‘P4’, Tel = ‘555-5558’ Nome = ‘P5’, Tel = ‘555-5559’ Aplicação Cliente x Servidor Consulta P5 555-5559 C++, ASP.NET, PHP, Java
- 18. PrudenteTechDay |2010 Múltiplos Clientes Nome =‘P1’, Tel = ‘555-5555’ Nome = ‘P2’, Tel = ‘555-5556’ Nome = ‘P3’, Tel = ‘555-5557’ Nome = ‘P4’, Tel = ‘555-5558’ Nome = ‘P5’, Tel = ‘555-5559’
- 19. PrudenteTechDay |2010 Cluster de Servidores Nome= ‘P1’, Tel = ‘555-5555’ Nome = ‘P2’, Tel = ‘555-5556’ Nome = ‘P3’, Tel = ‘555-5557’ Nome = ‘P4’, Tel = ‘555-5558’ Nome = ‘P5’, Tel = ‘555-5559’
- 20.
- 21. PrudenteTechDay |2010 Parte II -Inside SQL Server Query Processor Storage Transaction
- 22. PrudenteTechDay |2010 Componentes Access Method Manager BufferManager Database Manager Expression Manager File Manager Log Manager Memory Manager Metadata Manager Query Optimizer Security Manager SQL Native Client Thread Scheduler Transaction Manager ...
- 23. PrudenteTechDay |2010 Principais Famílias Principais “Famílias” QueryProcessor Transaction Storage Storage Query Processor Transaction
- 24. PrudenteTechDay |2010 Principais Famílias Query Processor:Compilação Linguagem SQL Processo de Compilação Storage Discos e Memória Transactions Propriedades ACID Processo de Rollback Processo de Database Recovery
- 25. PrudenteTechDay |2010 Query Processor: Compilação Terminologia Query(Consulta) Linguagem SQL Parser Compilação Otimização
- 26. PrudenteTechDay |2010 Semântica da LinguagemSQL Padrão ANSI-SQL Independência do modelo físico A linguagem SQL descreve: QUAL a informação desejada Mas não descreve COMO obter o dado
- 27. PrudenteTechDay |2010 Linguagem SQL Descreve QUALinformação obter: SELECT Nomes FROM vPessoas WHERE Pessoas.Idade < 5 AND Pessoas.Amigos > 100
- 28. PrudenteTechDay |2010 Exemplo: Programação For Each(Pessoas) { if(Pessoa.Idade < 5 ) if( Amigos(Pessoa) > 100 ) PRINT(‘Valido’); }
- 29. PrudenteTechDay |2010 Exemplo: Programação For Each(Pessoas) { if(Pessoa.Idade < 60 ) if( Amigos(Pessoa) > 1000 ) PRINT(‘Valido’); }
- 30. PrudenteTechDay |2010 Exemplo: Programação For Each(Pessoas) { if(Pessoa.Idade < 60 ) if( Amigos(Pessoa) > 1000 ) PRINT(‘Valido’); }
- 31. PrudenteTechDay |2010 Exemplo: Programação For Each(Pessoas) { if(Amigos(Pessoa) > 1000 ) if( Pessoa.Idade < 60 ) PRINT(‘Valido’); } Otimização de código!!!
- 32. PrudenteTechDay |2010 Compilador SQL Texto Parser Tree CompiledPlan Execution Plan
- 33. PrudenteTechDay |2010 Texto Inicial Texto Parser Tree CompiledPlan Execution Plan SELECT Nomes FROM vPessoas WHERE Pessoas.Idade < 60 AND Pessoas.Amigos > 1000
- 34. PrudenteTechDay |2010 Compilador SQL -Parser Tree Texto Parser Tree Compiled Plan Execution Plan SELECT FROM Pessoas Pessoas Amigos WHERE < Idade 60 > Amigos 1000 Nomes
- 35. PrudenteTechDay |2010 Compilador SQL –Compiled Plan Texto Parser Tree Compiled Plan Execution Plan For Each(Pessoas) { if( Amigos(Pessoa) > 1000 ) if( Pessoa.Idade < 60 ) PRINT(‘Valido’); } For Each(Pessoas) { if( Pessoa.Idade < 60 ) if( Amigos(Pessoa) > 1000 ) PRINT(‘Valido’); } SELECT FROM vPessoas Pessoas Amigos WHERE < (Menor) Idade 60 > (Maior) Amigos 1000 Nomes
- 36. PrudenteTechDay |2010 Compilador SQL –Execution Plan Texto Parser Tree Compiled Plan Execution Plan Compiled Plan (Cplan) For Each(Pessoas) if( Amigos(Pessoa) > 1000 ) if( Pessoa.Idade < 60 ) PRINT(‘Valido’); Variáveis Ambiente CPlan Variáveis Ambiente CPlan Variáveis Ambiente CPlan
- 37. PrudenteTechDay |2010 Principais Famílias Query Processor LinguagemSQL Processo de Compilação Storage: Armazenamento de Dados Discos e Memória Transactions Propriedades ACID Processo de Rollback Processo de Database Recovery
- 38. PrudenteTechDay |2010 Storage Mídias de Armazenamentode Dados Buffer Manager
- 39. PrudenteTechDay |2010 Mídias de Armazenamento CacheL1/L2 Memória RAM Discos magnéticos(HD) Mídia ótica e Fitas
- 40. PrudenteTechDay |2010 Mundo Ideal Sonho: Bancode Dados 100% em Memória Crescimento do Volume de Dados Quase impossível armazenar tudo em memória Alto custo (compensa o benefício?) Mídia Volátil Perda de dados em caso de falta de energia
- 41. PrudenteTechDay |2010 Mídia Não-Volátil Dispositivo dearmazenamento que não perde informações ao cortar a fonte de energia Tecnologia Atual Magnetic Disk Futuro Solid State Disk
- 42.
- 43.
- 44.
- 45.
- 46.
- 47. PrudenteTechDay |2010 Buffer Manager Cache deDados em Memória Dados mais acessados ficam em memória, enquanto que o resto continua em disco Responsável pelo gerenciamento de memória Dilema sobre a Memória livre: quanto mais melhor ou pior?
- 48. PrudenteTechDay |2010 Transactions Unidade de Operação Podeser composta por múltiplas operações Ações Commit Rollback
- 49. PrudenteTechDay |2010 Exemplo: Casal reformandoa sala BEGIN TRANSACTION Pintar parede da sala de verde Colocar um abajur marrom na mesa Comprar um sofá creme no lugar do azul Se não combinar, ROLLBACK TRANSACTION COMMIT TRANSACTION
- 50. PrudenteTechDay |2010 Propriedades ACID daTransação Atomicity Consistency Isolation Durability
- 51. PrudenteTechDay |2010 Processo de Log LogTable e Log Records (Blocks) Log Table BEGIN TRANSACTION (transaction_id = 299) Apaga dados do usuário Insert nova informacao COMMIT TRAN (transaction_id = 299) BEGIN TRANSACTION (transaction_id = 300) Apaga tabela COMMIT TRAN (transaction_id = 300)
- 52. PrudenteTechDay |2010 Processo de Rollback Atomicity/Consistency Restauraro estado anterior Todas as modificações registram o estado ANTES e DEPOIS As correções são chamadas de Compensation Record Log Table BEGIN TRANSACTION Apaga registro (AAAA) Insert registro (BBBB) (ROLLBACK TRAN)Apaga registro (BBB) Compensation Insere registro (AAA) Compensation Rollback completo
- 53.
- 54.
- 55. PrudenteTechDay |2010 Integração do Loge Buffer Manager Todas operações devem ser escritas no LOG antes de escrever nos BUFFERS de DADOS. Memória Disco INSERT Log Table BEGIN TRANSACTION INSERT COMMIT TRAN
- 56. PrudenteTechDay |2010 Processo de Recovery Épossível perder dados se... Desligar o computador inesperadamente? Faltar de energia elétrica? Database Recovery Processo automático Garantia de Consistência de Dados
- 57.
- 58.
- 59. PrudenteTechDay |2010 Certificação Microsoft Microsoft CertifiedTechnology Specialist Microsoft Certified IT Professional Microsoft Certified Master Microsoft Certified Architect Certificação Microsoft (SQL Server) http://www.microsoft.com/learning/pt/br/certification/cert- sql-server.aspx
- 60.
- 61.
- 62.