SlideShare uma empresa Scribd logo
1 de 20
Baixar para ler offline
FME e Big Data
Rafael Henrique
Agenda
● Big Data
● Formatos suportados
● Transformers
● Exemplos e Casos de Usos
Big Data
Conceito Big Data
“... Big data é um termo que descreve o grande volume de
dados sejam eles estruturados ou não-estruturados que
impactam as empresas diariamente …”
Big Data e FME
Evolução dos Formatos
Formatos para Big Data
NoSQL
Databases
Relational Database
MongoDB
ElasticSearchCouchDB Cloudant Amazon
DynamoDB
Azure
DocumentDB
Red Shift
Sap Hana
Teradata
DB2
Formatos para Big Data
Transformers Utilizado
Metadados Não estruturado
Migração de Bases
Estruturadas para não
estruturadas
Cruzamento de dados NoSQL
com dados Estruturados
Serviços na Nuvem
Problema Encontrado
Migração para Bases
NoSQL.
Solução
FME.
Resultados
Banco de Dados,
arquivos, serviços,
etc.
Migração de Bases NoSQL
Possibilidades de transformações entre dados
estruturados e não estruturados.
Migração de Bases NoSQL
Demo 1
Problema Encontrado
Cruzamento de
diferente formatos em
diferentes estruturas
Solução
FME.
Resultados
FME Simplifica e
padroniza a estrutura
dos dados facilitando
o tratamento
Cruzamento Dados
Cruzando diferente tipos de bases de dados
Cruzamento Dados
Demo 2
Problema Encontrado
Disponibilizar e
encontrar informaçõe
dos seus dados
Solução
FME.
Resultados
Facilidade de
integração com outro
sistemas e agilidade
para encontrar seus
dados
Metadados Dados
Criando Metadados
Metadados Dados
Demo 3
Problema Encontrado
Interação com
diferentes nuvens
Solução
FME.
Resultados
Conexão nativa
facilitando a
comunicação e
segunça da
informação
Serviços Cloud
Interação com serviços em Cloud
Serviços Cloud
Demo 4
MongoDB
MongoDB
Dúvidas.
Obrigado
Rafael Henrique
rafaelsilva@inovacaogis.co
m.br

Mais conteúdo relacionado

Semelhante a FME e Big Data: Transformando e Integrando Dados

Bancos de Dados Pós-Relacionais
Bancos de Dados Pós-RelacionaisBancos de Dados Pós-Relacionais
Bancos de Dados Pós-Relacionaiselliando dias
 
No sql no desenvolvimento de aplicações web colaborativas
No sql no desenvolvimento de aplicações web colaborativasNo sql no desenvolvimento de aplicações web colaborativas
No sql no desenvolvimento de aplicações web colaborativasJoão Gabriel Lima
 
Apresentação Modelo de Gestão de dados para sistemas Colaborativos
Apresentação Modelo de Gestão de dados para sistemas ColaborativosApresentação Modelo de Gestão de dados para sistemas Colaborativos
Apresentação Modelo de Gestão de dados para sistemas ColaborativosMozart Dornelles Claret
 
[DTC21] Lucas Gomes - Do 0 ao 100 no Big Data
[DTC21] Lucas Gomes - Do 0 ao 100 no Big Data[DTC21] Lucas Gomes - Do 0 ao 100 no Big Data
[DTC21] Lucas Gomes - Do 0 ao 100 no Big DataDeep Tech Brasil
 
Tomada decisão
Tomada decisãoTomada decisão
Tomada decisãoEcoplas
 
por_detras_dos_relatorios
por_detras_dos_relatoriospor_detras_dos_relatorios
por_detras_dos_relatoriosarthurjosemberg
 
Cobo, Cristiane Brandão. Especialização Banco de Dados
Cobo, Cristiane Brandão. Especialização Banco de DadosCobo, Cristiane Brandão. Especialização Banco de Dados
Cobo, Cristiane Brandão. Especialização Banco de Dadoscris.finholdt
 
Apresentação Final de Banco de Dados
Apresentação Final de Banco de DadosApresentação Final de Banco de Dados
Apresentação Final de Banco de Dadossamlobo
 
Tesi Dados Final
Tesi Dados FinalTesi Dados Final
Tesi Dados Finaljcaroso
 
TDC2016POA | Trilha BigData - Orquestrando Hadoop, Cassandra e MongoDB com o ...
TDC2016POA | Trilha BigData - Orquestrando Hadoop, Cassandra e MongoDB com o ...TDC2016POA | Trilha BigData - Orquestrando Hadoop, Cassandra e MongoDB com o ...
TDC2016POA | Trilha BigData - Orquestrando Hadoop, Cassandra e MongoDB com o ...tdc-globalcode
 
Escalabilidade Linear com o Banco de Dados NoSQL Apache Cassandra.
Escalabilidade Linear com o Banco de Dados NoSQL Apache Cassandra.Escalabilidade Linear com o Banco de Dados NoSQL Apache Cassandra.
Escalabilidade Linear com o Banco de Dados NoSQL Apache Cassandra.Ambiente Livre
 
Algumas das principais características do NoSQL
Algumas das principais características do NoSQLAlgumas das principais características do NoSQL
Algumas das principais características do NoSQLEric Silva
 
Aula 5 caracteristicas do ad
Aula 5 caracteristicas do adAula 5 caracteristicas do ad
Aula 5 caracteristicas do adFrank alcantara
 
Banco de Dados NoSql - JornalJava
Banco de Dados NoSql - JornalJavaBanco de Dados NoSql - JornalJava
Banco de Dados NoSql - JornalJavajornaljava
 

Semelhante a FME e Big Data: Transformando e Integrando Dados (20)

Bancos de Dados Pós-Relacionais
Bancos de Dados Pós-RelacionaisBancos de Dados Pós-Relacionais
Bancos de Dados Pós-Relacionais
 
No sql no desenvolvimento de aplicações web colaborativas
No sql no desenvolvimento de aplicações web colaborativasNo sql no desenvolvimento de aplicações web colaborativas
No sql no desenvolvimento de aplicações web colaborativas
 
Apresentação Modelo de Gestão de dados para sistemas Colaborativos
Apresentação Modelo de Gestão de dados para sistemas ColaborativosApresentação Modelo de Gestão de dados para sistemas Colaborativos
Apresentação Modelo de Gestão de dados para sistemas Colaborativos
 
Persitência Poliglota TDC Recife 2019
Persitência Poliglota TDC Recife 2019Persitência Poliglota TDC Recife 2019
Persitência Poliglota TDC Recife 2019
 
[DTC21] Lucas Gomes - Do 0 ao 100 no Big Data
[DTC21] Lucas Gomes - Do 0 ao 100 no Big Data[DTC21] Lucas Gomes - Do 0 ao 100 no Big Data
[DTC21] Lucas Gomes - Do 0 ao 100 no Big Data
 
Tomada decisão
Tomada decisãoTomada decisão
Tomada decisão
 
por_detras_dos_relatorios
por_detras_dos_relatoriospor_detras_dos_relatorios
por_detras_dos_relatorios
 
Pesquisa sobre no sql
Pesquisa sobre no sqlPesquisa sobre no sql
Pesquisa sobre no sql
 
Cobo, Cristiane Brandão. Especialização Banco de Dados
Cobo, Cristiane Brandão. Especialização Banco de DadosCobo, Cristiane Brandão. Especialização Banco de Dados
Cobo, Cristiane Brandão. Especialização Banco de Dados
 
Artigo de banco de dados
Artigo  de banco de dadosArtigo  de banco de dados
Artigo de banco de dados
 
Bancodedados
BancodedadosBancodedados
Bancodedados
 
Apresentação Final de Banco de Dados
Apresentação Final de Banco de DadosApresentação Final de Banco de Dados
Apresentação Final de Banco de Dados
 
Tesi Dados Final
Tesi Dados FinalTesi Dados Final
Tesi Dados Final
 
TDC2016POA | Trilha BigData - Orquestrando Hadoop, Cassandra e MongoDB com o ...
TDC2016POA | Trilha BigData - Orquestrando Hadoop, Cassandra e MongoDB com o ...TDC2016POA | Trilha BigData - Orquestrando Hadoop, Cassandra e MongoDB com o ...
TDC2016POA | Trilha BigData - Orquestrando Hadoop, Cassandra e MongoDB com o ...
 
Escalabilidade Linear com o Banco de Dados NoSQL Apache Cassandra.
Escalabilidade Linear com o Banco de Dados NoSQL Apache Cassandra.Escalabilidade Linear com o Banco de Dados NoSQL Apache Cassandra.
Escalabilidade Linear com o Banco de Dados NoSQL Apache Cassandra.
 
Algumas das principais características do NoSQL
Algumas das principais características do NoSQLAlgumas das principais características do NoSQL
Algumas das principais características do NoSQL
 
Aula 5 caracteristicas do ad
Aula 5 caracteristicas do adAula 5 caracteristicas do ad
Aula 5 caracteristicas do ad
 
TDC - Planejando data Lake com big data clusters
TDC - Planejando data Lake com big data clustersTDC - Planejando data Lake com big data clusters
TDC - Planejando data Lake com big data clusters
 
Banco de Dados NoSql - JornalJava
Banco de Dados NoSql - JornalJavaBanco de Dados NoSql - JornalJava
Banco de Dados NoSql - JornalJava
 
TDBIS - Totaldata Business Intelligence Server
TDBIS - Totaldata Business Intelligence ServerTDBIS - Totaldata Business Intelligence Server
TDBIS - Totaldata Business Intelligence Server
 

Mais de Inovação GIS - Tecnologia da Informação

Uso de ETL na integração de dados geoespaciais nas atividades de planejament...
 Uso de ETL na integração de dados geoespaciais nas atividades de planejament... Uso de ETL na integração de dados geoespaciais nas atividades de planejament...
Uso de ETL na integração de dados geoespaciais nas atividades de planejament...Inovação GIS - Tecnologia da Informação
 
IMPACTOS DA CONVERSÃO DE DADOS GEOESPACIAIS NA GESTÃO DOS IMÓVEIS PÚBLICOS FE...
IMPACTOS DA CONVERSÃO DE DADOS GEOESPACIAIS NA GESTÃO DOS IMÓVEIS PÚBLICOS FE...IMPACTOS DA CONVERSÃO DE DADOS GEOESPACIAIS NA GESTÃO DOS IMÓVEIS PÚBLICOS FE...
IMPACTOS DA CONVERSÃO DE DADOS GEOESPACIAIS NA GESTÃO DOS IMÓVEIS PÚBLICOS FE...Inovação GIS - Tecnologia da Informação
 

Mais de Inovação GIS - Tecnologia da Informação (20)

PROJETO DE MONITORAMENTO DE TARTARUGAS MARINHAS (PMTM) PORTO DO AÇÚ
PROJETO DE MONITORAMENTO DE TARTARUGAS MARINHAS (PMTM) PORTO DO AÇÚPROJETO DE MONITORAMENTO DE TARTARUGAS MARINHAS (PMTM) PORTO DO AÇÚ
PROJETO DE MONITORAMENTO DE TARTARUGAS MARINHAS (PMTM) PORTO DO AÇÚ
 
PROJETO DE MONITORAMENTO DA PESCA PORTO DO AÇÚ
PROJETO DE MONITORAMENTO DA PESCA PORTO DO AÇÚPROJETO DE MONITORAMENTO DA PESCA PORTO DO AÇÚ
PROJETO DE MONITORAMENTO DA PESCA PORTO DO AÇÚ
 
FME na Celesc – Ganho na automação dos processos
FME na Celesc – Ganho na automação dos processosFME na Celesc – Ganho na automação dos processos
FME na Celesc – Ganho na automação dos processos
 
Uso de ETL na integração de dados geoespaciais nas atividades de planejament...
 Uso de ETL na integração de dados geoespaciais nas atividades de planejament... Uso de ETL na integração de dados geoespaciais nas atividades de planejament...
Uso de ETL na integração de dados geoespaciais nas atividades de planejament...
 
Relatórios automatizados utilizando FME
Relatórios automatizados utilizando FMERelatórios automatizados utilizando FME
Relatórios automatizados utilizando FME
 
SharperDataBI
SharperDataBI SharperDataBI
SharperDataBI
 
FME na Comgás – Automação de processos
FME na Comgás – Automação de processosFME na Comgás – Automação de processos
FME na Comgás – Automação de processos
 
IMPACTOS DA CONVERSÃO DE DADOS GEOESPACIAIS NA GESTÃO DOS IMÓVEIS PÚBLICOS FE...
IMPACTOS DA CONVERSÃO DE DADOS GEOESPACIAIS NA GESTÃO DOS IMÓVEIS PÚBLICOS FE...IMPACTOS DA CONVERSÃO DE DADOS GEOESPACIAIS NA GESTÃO DOS IMÓVEIS PÚBLICOS FE...
IMPACTOS DA CONVERSÃO DE DADOS GEOESPACIAIS NA GESTÃO DOS IMÓVEIS PÚBLICOS FE...
 
Sabesp FME 2018
Sabesp FME 2018Sabesp FME 2018
Sabesp FME 2018
 
Casos de uso do FME no IBGE
Casos de uso do FME no IBGECasos de uso do FME no IBGE
Casos de uso do FME no IBGE
 
Novidades fme 2018
Novidades fme 2018Novidades fme 2018
Novidades fme 2018
 
Automatizando processo utilizando workflow
Automatizando processo utilizando workflowAutomatizando processo utilizando workflow
Automatizando processo utilizando workflow
 
Apresentação SPU
Apresentação SPUApresentação SPU
Apresentação SPU
 
Automatizando no FME server
Automatizando no FME serverAutomatizando no FME server
Automatizando no FME server
 
Apresentação IBGE
Apresentação IBGEApresentação IBGE
Apresentação IBGE
 
Apresentação Comgás
Apresentação ComgásApresentação Comgás
Apresentação Comgás
 
Apresentação Transpetro
Apresentação  TranspetroApresentação  Transpetro
Apresentação Transpetro
 
Web services melhores praticas para Integração
Web services melhores praticas para Integração Web services melhores praticas para Integração
Web services melhores praticas para Integração
 
Novidades FME 2017
Novidades FME 2017Novidades FME 2017
Novidades FME 2017
 
Extraindo informações de Sites_usando_FME
Extraindo informações de  Sites_usando_FMEExtraindo informações de  Sites_usando_FME
Extraindo informações de Sites_usando_FME
 

FME e Big Data: Transformando e Integrando Dados