SlideShare uma empresa Scribd logo
1 de 17
Baixar para ler offline
Limpeza e Validação de Dados
no FME
Quem sou eu?
Danilo de Lima Veneziani
o Possui experiência de mais de 11 anos na plataforma FME;
o Mais de 70 treinamentos ministrados (presencialmente e remotamente) em diversos clientes;
o Certificações FME Professional e Trainer.
Agenda
● Solutial
● O que fazemos?
● Comofazemos?
● OquesãoaplicaçõesWeb?
● Next Steps
● Q&A
Solution
Spatial
SOL UT IAL -SOL UÇ ÕE S E
ANÁL ISE DE DADOS
A Solutial está situada na
cidade de
São José dos Campos – SP
O que fazemos?
Realizamos a transformação do dado até o processo de
Tomada de Decisão.
Dados
Informação
Conhecimento
Tomada de
Decisão
Como fazemos?
Realizamos a transformação do dado até o processo de
Tomada de Decisão.
Seus dados
São milhares de dados
dentro das organizações
Funcionalidades
+ de 450 conectores de dados
+ 500 transformers prontos
Especialistas
Analistas de Spatial ETL
Data Science
Overview
A validação de dados é uma parte essencial de qualquer tarefa de tratamento de
dados, esteja você em campo coletando informações, analisando dados ou se
preparando para apresentar seus dados às partes interessadas.
O que é validação de dados no
FME?
● Schema
● Valores dos dados
● Geometrias
● Padrões
● QA/QC
Transformers para validação
Validação de Atributos
Validação de Atributos
Endereços
“Sujos”
Base Limpa
Semântica
Validação Geométrica
A geometria inválida vem em muitas formas. Os problemas podem
incluir:
☑ Autointerseções.
☑ Geometrias degeneradas ou corrompidas. Por exemplo, uma rosca sem furo, um múltiplo sem
peças, localizações de pontos finais do arco definido inconsistentes com o arco real.
☑ Geometrias nulas.
☑ Vértices com normais ausentes.
Validação Geométrica
☑ No caso de geometria com uma textura, verifique as coordenadas de textura associadas.
☑ Limites sólidos inválidos (podem incluir limites não fechados, projeção inválida, orientação
incorreta da face, vértices não utilizados, faces livres).
☑ Vazios sólidos inválidos. Por exemplo, um interior de concha desconectado.
☑ Superfícies não planas, ou seja, vértices não estão no mesmo plano no espaço 3D.
☑ Duplicar pontos consecutivos, em 2D ou 3D
.
Validação Geométrica
Identificando e removendo Spikes
Validação Geométrica
Identificando e removendo Spikes
Duplicados
• Linhas duplicadas
Microlinhas
• Identificação de
microlinhas
Spikes
• Identificação de
Spikes e remoção
FME Server Apps
CONTATOS
E-MAIL
comercial@solutial.com.br
12 3346-6858
WWW.SOLUTIAL.COM.BR

Mais conteúdo relacionado

Semelhante a Limpeza de dados

Curriculum Marcelo Carvalho Cruz
Curriculum Marcelo Carvalho CruzCurriculum Marcelo Carvalho Cruz
Curriculum Marcelo Carvalho Cruz
Marcelo Cruz
 

Semelhante a Limpeza de dados (16)

2011: Mineração de Dados - Conceitos Básicos e Aplicações
2011: Mineração de Dados - Conceitos Básicos e Aplicações2011: Mineração de Dados - Conceitos Básicos e Aplicações
2011: Mineração de Dados - Conceitos Básicos e Aplicações
 
Materiais (1)
Materiais (1)Materiais (1)
Materiais (1)
 
Resumo para Modelagem/Mapeamento de Processos de Negócios
Resumo para Modelagem/Mapeamento de Processos de NegóciosResumo para Modelagem/Mapeamento de Processos de Negócios
Resumo para Modelagem/Mapeamento de Processos de Negócios
 
Mineração de Dados no Weka - Regressão Linear
Mineração de Dados no Weka -  Regressão LinearMineração de Dados no Weka -  Regressão Linear
Mineração de Dados no Weka - Regressão Linear
 
Quero trabalhar na área de dados. Por onde começar?
Quero trabalhar na área de dados. Por onde começar?Quero trabalhar na área de dados. Por onde começar?
Quero trabalhar na área de dados. Por onde começar?
 
Experiências Ágeis no Ikwa
Experiências Ágeis no IkwaExperiências Ágeis no Ikwa
Experiências Ágeis no Ikwa
 
Explore o uso de Dados LiDAR no FME
Explore o uso de Dados LiDAR no FMEExplore o uso de Dados LiDAR no FME
Explore o uso de Dados LiDAR no FME
 
[GetNinjas] Business Intelligence Workshop @ Google Campus SP
[GetNinjas] Business Intelligence Workshop @ Google Campus SP[GetNinjas] Business Intelligence Workshop @ Google Campus SP
[GetNinjas] Business Intelligence Workshop @ Google Campus SP
 
Webinar "Banco de Dados e FME"
Webinar "Banco de Dados e FME"Webinar "Banco de Dados e FME"
Webinar "Banco de Dados e FME"
 
Visualização de Dados - Aula 3
Visualização de Dados - Aula 3Visualização de Dados - Aula 3
Visualização de Dados - Aula 3
 
Curriculum Marcelo Carvalho Cruz
Curriculum Marcelo Carvalho CruzCurriculum Marcelo Carvalho Cruz
Curriculum Marcelo Carvalho Cruz
 
Análise de Negócio - Visão Geral da Carreira
Análise de Negócio - Visão Geral da CarreiraAnálise de Negócio - Visão Geral da Carreira
Análise de Negócio - Visão Geral da Carreira
 
Gap analysis - Análise de Lacunas
Gap analysis - Análise de LacunasGap analysis - Análise de Lacunas
Gap analysis - Análise de Lacunas
 
O Pilar da Excelência: Como Gerenciar a Qualidade do Projeto
O Pilar da Excelência: Como Gerenciar a Qualidade do ProjetoO Pilar da Excelência: Como Gerenciar a Qualidade do Projeto
O Pilar da Excelência: Como Gerenciar a Qualidade do Projeto
 
Apresentação Bschart
Apresentação BschartApresentação Bschart
Apresentação Bschart
 
FME para TI
FME para TIFME para TI
FME para TI
 

Mais de Solutial OFICIAL

Mais de Solutial OFICIAL (16)

Saas com FME
Saas com FMESaas com FME
Saas com FME
 
Indicadores de Aderência
Indicadores de AderênciaIndicadores de Aderência
Indicadores de Aderência
 
Aplicando Geocodificação em seus Dados
Aplicando Geocodificação em seus DadosAplicando Geocodificação em seus Dados
Aplicando Geocodificação em seus Dados
 
FME DATA EXPRESS
FME DATA EXPRESSFME DATA EXPRESS
FME DATA EXPRESS
 
Mergulhando no FME Desktop 2019
Mergulhando no FME Desktop 2019Mergulhando no FME Desktop 2019
Mergulhando no FME Desktop 2019
 
Webinar "Conhecendo FME Cloud".
Webinar "Conhecendo FME Cloud".Webinar "Conhecendo FME Cloud".
Webinar "Conhecendo FME Cloud".
 
Novidades FME 2019
Novidades FME 2019Novidades FME 2019
Novidades FME 2019
 
FME e Amazon Web Services
FME e Amazon Web ServicesFME e Amazon Web Services
FME e Amazon Web Services
 
Criando Mapa de Calor (Heatmap) no FME Desktop
Criando Mapa de Calor (Heatmap) no FME DesktopCriando Mapa de Calor (Heatmap) no FME Desktop
Criando Mapa de Calor (Heatmap) no FME Desktop
 
Empregando Machine Learning na Agricultura com o FME
Empregando Machine Learning na Agricultura com o FMEEmpregando Machine Learning na Agricultura com o FME
Empregando Machine Learning na Agricultura com o FME
 
Webinar "FME e BIM"
Webinar "FME e BIM"Webinar "FME e BIM"
Webinar "FME e BIM"
 
Webinar Raster
Webinar RasterWebinar Raster
Webinar Raster
 
Webinar Automatizando com FME Server
Webinar Automatizando com FME ServerWebinar Automatizando com FME Server
Webinar Automatizando com FME Server
 
Solutial FME
Solutial FMESolutial FME
Solutial FME
 
O que é FME
O que é FMEO que é FME
O que é FME
 
Novidades FME 2018
Novidades FME 2018Novidades FME 2018
Novidades FME 2018
 

Limpeza de dados