Business Intelligence com Pentaho

448 visualizações

Publicada em

IFFarroupilha MEPT 2014

Publicada em: Tecnologia
0 comentários
1 gostou
Estatísticas
Notas
  • Seja o primeiro a comentar

Sem downloads
Visualizações
Visualizações totais
448
No SlideShare
0
A partir de incorporações
0
Número de incorporações
6
Ações
Compartilhamentos
0
Downloads
18
Comentários
0
Gostaram
1
Incorporações 0
Nenhuma incorporação

Nenhuma nota no slide

Business Intelligence com Pentaho

  1. 1. Business Intelligence com Pentaho Maicon de Brito do Amarante maicon.amarante@iffarroupilha.edu.br Instituto Federal Farroupilha Campus S~ao Vicente do Sul Coordenac~ao de Tecnologia da Informac~ao 25 de outubro de 2014 Maicon BI com Pentaho V MEPT 1 / 40
  2. 2. Roteiro 1 Business Intelligence 2 Data Warehouse 3 Sistemas de Apoio a Decis~ao 4 Fluxo de Business Intelligence 5 Pentaho Data Integration - Kettle BI Server Dashboard OLAP Cube Report Weka Maicon BI com Pentaho V MEPT 2 / 40
  3. 3. Business Intelligence Roteiro 1 Business Intelligence 2 Data Warehouse 3 Sistemas de Apoio a Decis~ao 4 Fluxo de Business Intelligence 5 Pentaho Data Integration - Kettle BI Server Dashboard OLAP Cube Report Weka Maicon BI com Pentaho V MEPT 3 / 40
  4. 4. Business Intelligence BI? Intelig^encia empresarial Business intelligence (BI) e um conjunto de metodologias, arquiteturas e tecnicas que transformam dados brutos em informac~ao compreensvel e util para os propositos do negocio. Rud, Olivia (2009). Business Intelligence Success Factors: Tools for Aligning Your Business in the Global Economy. Hoboken, N.J: Wiley Sons. Maicon BI com Pentaho V MEPT 4 / 40
  5. 5. Business Intelligence Por que BI? Mas a
  6. 6. nal, o que eu ganho com isso? Por que investir em Business Intelligence? Maicon BI com Pentaho V MEPT 5 / 40
  7. 7. Business Intelligence Por que BI? detectar tend^encias onde cortar custos? onde investir? qual o risco? onde/para quem divulgar um produto? tomada de decis~ao! Apenas a experi^encia basta para tomar decis~oes? Maicon BI com Pentaho V MEPT 6 / 40
  8. 8. Business Intelligence Precisamos de informac~oes, mas... Como... extrair e integrar dados de multiplas fontes sistemas, planilhas, documentos... fazer uso da experi^encia casos ja resolvidos analisar dados contextualizados ndices s~ao bons ou ruins comparados com o que/quem? procurar relac~oes de causa e efeito foi a ac~ao de marketing que fez vender mais? Se... volume de dados e muito grande fontes de dados diversas informac~oes apresentadas fora de contexto Maicon BI com Pentaho V MEPT 7 / 40
  9. 9. Business Intelligence Maicon BI com Pentaho V MEPT 8 / 40
  10. 10. Business Intelligence Algumas tarefas de BI segmentac~ao otimizac~ao de estoque cross-sell up-sell gest~ao de churn credit scoring gest~ao de turnover ... Maicon BI com Pentaho V MEPT 9 / 40
  11. 11. Business Intelligence Cases Telecom irlandesa O2 identi
  12. 12. cou 65% de clientes com quem se relacionava de fato, investindo na sua perman^encia (churn). Ao mapear a criminalidade, Curitiba reduziu, em media, 60% o registro de ocorr^encias policiais em areas monitoradas. TJSP aperfeicoou a identi
  13. 13. cac~ao dos crimes de viol^encia domestica e familiar contra a mulher. Escola Thomas Fortes (Santiago/RS) tracou per
  14. 14. l da comunidade escolar para atualizar seu projeto poltico-pedagogico. Metodologia sera publicada pela Secretaria Estadual de Educac~ao. Maicon BI com Pentaho V MEPT 10 / 40
  15. 15. Business Intelligence Cases Telecom irlandesa O2 identi
  16. 16. cou 65% de clientes com quem se relacionava de fato, investindo na sua perman^encia (churn). Ao mapear a criminalidade, Curitiba reduziu, em media, 60% o registro de ocorr^encias policiais em areas monitoradas. TJSP aperfeicoou a identi
  17. 17. cac~ao dos crimes de viol^encia domestica e familiar contra a mulher. Escola Thomas Fortes (Santiago/RS) tracou per
  18. 18. l da comunidade escolar para atualizar seu projeto poltico-pedagogico. Metodologia sera publicada pela Secretaria Estadual de Educac~ao. Maicon BI com Pentaho V MEPT 10 / 40
  19. 19. Business Intelligence Cases Telecom irlandesa O2 identi
  20. 20. cou 65% de clientes com quem se relacionava de fato, investindo na sua perman^encia (churn). Ao mapear a criminalidade, Curitiba reduziu, em media, 60% o registro de ocorr^encias policiais em areas monitoradas. TJSP aperfeicoou a identi
  21. 21. cac~ao dos crimes de viol^encia domestica e familiar contra a mulher. Escola Thomas Fortes (Santiago/RS) tracou per
  22. 22. l da comunidade escolar para atualizar seu projeto poltico-pedagogico. Metodologia sera publicada pela Secretaria Estadual de Educac~ao. Maicon BI com Pentaho V MEPT 10 / 40
  23. 23. Business Intelligence Cases Telecom irlandesa O2 identi
  24. 24. cou 65% de clientes com quem se relacionava de fato, investindo na sua perman^encia (churn). Ao mapear a criminalidade, Curitiba reduziu, em media, 60% o registro de ocorr^encias policiais em areas monitoradas. TJSP aperfeicoou a identi
  25. 25. cac~ao dos crimes de viol^encia domestica e familiar contra a mulher. Escola Thomas Fortes (Santiago/RS) tracou per
  26. 26. l da comunidade escolar para atualizar seu projeto poltico-pedagogico. Metodologia sera publicada pela Secretaria Estadual de Educac~ao. Maicon BI com Pentaho V MEPT 10 / 40
  27. 27. Business Intelligence Cases - IFFarroupilha/SVS - Processo Seletivo 2013/2014 estrategia de divulgac~ao criada com base nos relatorios de BI resultados ainda est~ao sendo avaliados Maicon BI com Pentaho V MEPT 11 / 40
  28. 28. Business Intelligence Cases - IFFarroupilha/SVS - Evas~oes Projeto de pesquisa tecnologico em andamento: Student Keeper: Business Intelligence aplicado a investigac~ao da evas~ao escolar edital PRPPGI-IFFAR 125/2014 Maicon BI com Pentaho V MEPT 12 / 40
  29. 29. Business Intelligence Tudo comeca com os dados! Se o problema e a organizac~ao dos dados, como organiza-los? Abordagem 1: implantar um novo sistema que resolva tudo Abordagem 2: refatorar, consolidando as bases de dados Abordagem 3: construir um data warehouse Maicon BI com Pentaho V MEPT 13 / 40
  30. 30. Data Warehouse Roteiro 1 Business Intelligence 2 Data Warehouse 3 Sistemas de Apoio a Decis~ao 4 Fluxo de Business Intelligence 5 Pentaho Data Integration - Kettle BI Server Dashboard OLAP Cube Report Weka Maicon BI com Pentaho V MEPT 14 / 40
  31. 31. Data Warehouse Data Warehouse Data Warehouse (DW): banco de dados consolidado, contendo dados extrados de diversas fontes, desnormalizado e indexado para suportar intensa pesquisa. Data Mart: subconjunto do DW - venda, estoque... Maicon BI com Pentaho V MEPT 15 / 40
  32. 32. Data Warehouse Como organizar? Modelagem Dimensional Modelagem do projeto logico; contrasta com a modelagem ER. Possui 2 modelos: Star Schema (facts dimensions) e.g.: Sales. Snow Flake Maicon BI com Pentaho V MEPT 16 / 40
  33. 33. Sistemas de Apoio a Decis~ao Roteiro 1 Business Intelligence 2 Data Warehouse 3 Sistemas de Apoio a Decis~ao 4 Fluxo de Business Intelligence 5 Pentaho Data Integration - Kettle BI Server Dashboard OLAP Cube Report Weka Maicon BI com Pentaho V MEPT 17 / 40
  34. 34. Sistemas de Apoio a Decis~ao Ok! Dados organizados! Data warehouse construdo! E agora? Agora precisamos transformar dados em informac~oes, disponibilizando um Sistema de Apoio a Decis~ao (SAD). O que teremos no SAD? relatorios dashboards cubos OLAP ... Maicon BI com Pentaho V MEPT 18 / 40
  35. 35. Sistemas de Apoio a Decis~ao OLTP vs. OLAP OLTP - On-line Transaction Processing transac~oes de negocio de um sistema armazenadas no BD nvel operacional OLAP - On-line Analytical Processing proporciona vis~ao dos dados voltados para analise nvel estrategico Maicon BI com Pentaho V MEPT 19 / 40
  36. 36. Sistemas de Apoio a Decis~ao Cubo OLAP Maicon BI com Pentaho V MEPT 20 / 40
  37. 37. Fluxo de Business Intelligence Roteiro 1 Business Intelligence 2 Data Warehouse 3 Sistemas de Apoio a Decis~ao 4 Fluxo de Business Intelligence 5 Pentaho Data Integration - Kettle BI Server Dashboard OLAP Cube Report Weka Maicon BI com Pentaho V MEPT 21 / 40
  38. 38. Fluxo de Business Intelligence Fluxo BI Maicon BI com Pentaho V MEPT 22 / 40
  39. 39. Pentaho Roteiro 1 Business Intelligence 2 Data Warehouse 3 Sistemas de Apoio a Decis~ao 4 Fluxo de Business Intelligence 5 Pentaho Data Integration - Kettle BI Server Dashboard OLAP Cube Report Weka Maicon BI com Pentaho V MEPT 23 / 40
  40. 40. Pentaho Grandes fornecedores de BI Maicon BI com Pentaho V MEPT 24 / 40
  41. 41. Pentaho BI open sourse Maicon BI com Pentaho V MEPT 25 / 40
  42. 42. Pentaho Pentaho Pentaho e um software de codigo aberto para intelig^encia empresarial, desenvolvido em Java. A soluc~ao cobre as areas de ETL, reporting, OLAP e minerac~ao de dados (data-mining). Desenvolvido desde 2004 pela Pentaho Corporation. Atualmente o Pentaho Community Edition esta na vers~ao 5.1. http://community.pentaho.com/ Maicon BI com Pentaho V MEPT 26 / 40
  43. 43. Download Pentaho BI today at: www.pentaho.com/download Be Social with Pentaho: Pentaho Community Enterprise Edition Product Comparison Test and QA Certified and Stable Software Deployment On Demand Cloud Hosted Option Professional Services Classroom / Online Training Consulting from Pentaho and Certified Partners Ongoing Support Community Online Forums Enterprise Edition Online Forums 24X7 Enterprise Support with SLAs (Tel/Email) Access to Professional Product Documentation Remote Assistance Packages (for Installation/Configuration, Design, Troubleshooting/Optimization) Knowledge Base of Technical Content Release Updates Roadmap Visibility and Influence Managed Release Cycles Entitlement to New Features and Upgrades Community Edition Enterprise Edition Immediate Access to Fully Tested Pentaho Fixes Eventually receives fixes (delays of 1-6 months) Need to re-build code and test manually Unpredictable and constant community code changes Leading Open Source Business Intelligence Shared Repository and Team Sharing Repository Content Versioning Repository Content Locking Automated Content Expiration Audit Reports User and Role-based Permissions Security Configuration with LDAP Active Directory Single Sign-On Automated ETL Job Scheduling Centralized Administration, Diagnostics, and Performance Monitoring Clustering Community Edition Enterprise Edition Evaluation Free 30 Day Evaluation Support Licensing and Pricing Low Cost License Advanced Features Automated Installers Sophisticated Interactive Data Analysis, Exploration Visualization Basic analysis Self-Service Dashboard Designer Hadoop Integration for 'Big Data' Reporting Analysis Support for Mobile BI (e.g. iPad) Free Code Requires in-house resources to patch and test Open Source GPL license If embedding in a commercial application, obliged to make your application available under the GPL open source license No up-front license costs Low cost subscription-based pricing Commercial license Community Edition Suited for evaluation or pre-production use. Customers choosing this option need internal resources to manage their own release cycles, test, support, and add advanced capabilities to the basic functionality available in this version. Enterprise Edition Suited for production deployments. Pentaho BI Suite Enterprise Edition provides advanced, self-contained, and quality-assured software that does not require in-house resources for development and test. Pentaho professional support offers world-class technical support that guarantees resolution times and service level agreements. Community vs Enterprise Edition: http://bit.ly/1gfrSHz
  44. 44. Pentaho Fluxo BI - Pentaho Maicon BI com Pentaho V MEPT 28 / 40
  45. 45. Pentaho Pentaho Data Integration (Kettle) Ferramenta para extrac~ao, transformac~ao e carga (ETL) de dados. Maicon BI com Pentaho V MEPT 29 / 40
  46. 46. Pentaho Pentaho Data Integration (Kettle) Ferramenta para extrac~ao, transformac~ao e carga (ETL) de dados. Maicon BI com Pentaho V MEPT 30 / 40
  47. 47. Pentaho BI Server Aplicac~ao responsavel pelo gerenciamento dos indicadores, compartilhamento entre os usuarios, controle de acesso, etc. Algumas tarefas: autenticac~ao auditoria mecanismo para integrac~ao com analises (cubes) paineis (dashboards) relatorios (reports) minerac~ao de dados (data mining) Maicon BI com Pentaho V MEPT 31 / 40
  48. 48. Pentaho Pentaho Dashboard Paineis para acesso rapido a informac~oes resumidas. Maicon BI com Pentaho V MEPT 32 / 40
  49. 49. Pentaho Vis~ao Analtica - Pentaho Cube Analisando evas~oes no campus. Maicon BI com Pentaho V MEPT 33 / 40
  50. 50. Pentaho BI Server Pentaho Reporting: derivado do projeto JFreeReport. Maicon BI com Pentaho V MEPT 34 / 40
  51. 51. Pentaho Weka - Machine Learning colec~ao de algoritmos de aprendizagem de maquina para tarefas de minerac~ao de dados (API: weka.jar) contem ferramentas para pre-processamento (extrati
  52. 52. cac~ao, etc), classi
  53. 53. cac~ao, regress~ao, clusterizac~ao, regras associativas, visualizac~ao... Maicon BI com Pentaho V MEPT 35 / 40
  54. 54. Pentaho Weka - Machine Learning classi
  55. 55. cac~ao: categoria que novo dado observado pertence exemplo: classi
  56. 56. car o cliente conforme o risco (bom/mal pagador) algoritmos: Arvores de Decis~ao, RNA, Redes Bayesianas regress~ao: estimar relacionamento entre as variaveis exemplo: predizer gastos de consumo, exportac~oes de um pas, quem vai zerar a prova de calculo... algoritmos: k-nearest neighbors, RNA Maicon BI com Pentaho V MEPT 36 / 40
  57. 57. Pentaho Weka - Machine Learning clusterizac~ao: agrupar dados utilizando a similaridade - exemplo: descobrir grupos distintos de clientes baseados em padr~oes de compras algoritmos: K-means, Fuzzy C Means, Gustafson-Kessel regras associativas: identi
  58. 58. car depend^encias entre atributos que frequentemente ocorrem juntos nos dados exemplo: cesta do supermercado - encontrar associac~oes entre itens que s~ao frequentemente comprados juntos algoritmos: Apriori, Ecla, FP-growth Maicon BI com Pentaho V MEPT 37 / 40
  59. 59. Pentaho Considerac~oes
  60. 60. nais grande potencial de aplicac~ao mercado em expans~ao consolidac~ao no IFFarroupilha/SVS Maicon BI com Pentaho V MEPT 38 / 40
  61. 61. Pentaho Por onde comecar? Curso de BI com PENTAHO https://www.youtube.com/watch?v= Y4xdD2BUTEklist=UUaLRDx7Wu6PxPvG6TrIc00w Maicon BI com Pentaho V MEPT 39 / 40
  62. 62. Pentaho Obrigado! Maicon de Brito do Amarante maicon.amarante@iarroupilha.edu.br http://pt.slideshare.net/maiconba Maicon BI com Pentaho V MEPT 40 / 40

×