Pré-processamento em Big Data

645 visualizações

Publicada em

Apresentação feita no PPGEE - Programa de Pós Graduação de Engenharia Elétrica da Universidade Federal do Pará

Uma explanação geral sobre o funcionamento das principais ferramentas disponíveis no mercado para análise e pré-processamento de dados

Publicada em: Tecnologia
0 comentários
2 gostaram
Estatísticas
Notas
  • Seja o primeiro a comentar

Sem downloads
Visualizações
Visualizações totais
645
No SlideShare
0
A partir de incorporações
0
Número de incorporações
20
Ações
Compartilhamentos
0
Downloads
7
Comentários
0
Gostaram
2
Incorporações 0
Nenhuma incorporação

Nenhuma nota no slide

Pré-processamento em Big Data

  1. 1. Pré-processamento: ferramentas e aplicações João Gabriel Lima jgabriel.ufpa@gmail.com
  2. 2. Importância do Pré-Processamento ● Seleção de atributos ● Limpeza dos Dados ● Transformação ● Construção de atributos ● Discretização
  3. 3. Big Data 6 Vs • Volume • Variedade • Velocidade • Valor • Variabilidade • Veracidade V 5 29/09/14
  4. 4. Pré-Processamento Vs Big Data
  5. 5. Open-Source Desenvolvimento Acadêmico Inovação Novos Paradigmas Critérios
  6. 6. Critérios
  7. 7. Batch X Real-time Processing
  8. 8. Batch Processing
  9. 9. Hadoop (MapReduce)
  10. 10. Hadoop (MapReduce)
  11. 11. Hadoop
  12. 12. HHPPCCCC SSyysstteemm
  13. 13. AHPPACCCH SEy DstReImLL
  14. 14. AHPPACCCH SEy DstReImLL
  15. 15. AHPPACCCH SEy DstReImLL
  16. 16. EHcPoCsCy sStyesmtesm
  17. 17. APACHE SPARK
  18. 18. APACHE SPARK
  19. 19. APACHE SPARK
  20. 20. Yahoo S4
  21. 21. Apache Storm
  22. 22. Apache Storm
  23. 23. Apache Storm
  24. 24. Apache Storm
  25. 25. Apache Storm
  26. 26. Apache Storm
  27. 27. Apache Storm
  28. 28. Apache Storm
  29. 29. Considerações Finais ●Hot Topic ●Muitas ferramentas e frameworks disponíveis ● Importante conhecer o domínio ●Cuidado! Não existe chave mestra! ● Potencial em aprendizagem de máquina
  30. 30. Pré-processamento: ferramentas e aplicações João Gabriel Lima jgabriel.ufpa@gmail.com

×