SlideShare uma empresa Scribd logo
Gestão de Qualidade de
Dados Cadastrais com
FME
Nagip César Abrahão
Adriana Xavier de Menezes Golsalves
Airton Minoru Shinto
Sabesp
Sabesp
Célula de GeoInformação
Nagip César Abrahão
Adriana Xavier de Menezes Golsalves
Airton Minoru Shinto
Diretoria Metropolitana
Unidades de Negócio
Não Operados
Outros usos do FME na
Sabesp
Prova de Conceito:
Identificação de Piscinas
Estudos Solicitados:
Crise Hídrica: Polígonos “de Crise”
Utilizações de FME em vigor:
Reposicionamento de Ligações na Face
da Quadra a partir de LigGeo
Renomeação de Imagens de Fotos obtidas
com Global ID para RGI
No dia-a-dia: transformações dbf, csv, xls,
Kml, projeções e sistemas de coordenadas
Pontos principais: Gestão
de Qualidade de Dados
utilizando o FME
Fluxo
Dados de entrada (SBS/Smallworld):
Tubulações de Distribuição
Limite de Unidades de Negócio
Arquivo de Saída (CSV):
Erros/Avisos por Objeto, por UN, por
Usuário
O PlugIn SBS permite
a leitura e a escrita em
Smallworld.
A correção do erro pode
ser feita diretamente como
saída do Fluxo FME.
Transformers
Deaggregator + Geometry Filter
Detecção de Poli Arcos
Tester
Campos Vazios, Campos Contraditórios
Matcher
Duplicidades
Comprimento real não está preenchido
Proprietário não está preenchido
Diâmetro não está preenchido
Material não está preenchido
Data de Instalação não está preenchido
Compr Calculado menor que 1 m
Geometria Irregular (Poliarcos)
Comprimento Real Muito Diferente do Calculado (Parametrizável)
Diâmetro Pouco Usual (menor que 10 mm)
Tubulação Não Circular com Diâmetro (Seção Retangular)
Tubulação Circular com Dimensões da Secção
Material pouco usual ou grafado incorretamente
Data de Instalação/Abandono Futura
Outros Testes deste fluxo e de outros fluxos:
Tubulações Desconectadas
Tubulações Conectadas Somente Numa Extremidade
Erros/Avisos
por Tubulação
Erros/Avisos por Tipo
Erros/Avisos por Unidade de Negócio
Erros/Avisos por Usuário
Qualidade de Dados no Signos
Antes
• QA/QC por trilho –
processo demorado e
executado pelo usuário;
relatórios por tipo de
erro
Depois
• Fluxo automatizado –
executado
corporativamente;
relatórios por objeto
Qualidade de Dados no Signos
Antes
• Não há acompanhamento
nem indicadores
associados; periodicidade
indefinida
Depois
• Indicadores por UN e por
usuário; periodicidade
definida e execução
autônoma
Qualidade de Dados no Signos
Antes
• Pouca flexibilidade de
testes e parametrizações
customizadas sobre
código Smallworld.
Depois
• Fluxo “Modular”, com
facilidade para
implementar novos
testes, mudar
parâmetros e aperfeiçoar
as verificações
Obrigado!
Nagip César Abrahão
nabraao@sabesp.com.br
Adriana Xavier de Menezes Golsalves
agonsalves@sabesp.com.br
Airton Minoru Shinto
ashinto@sabesp.com.br

Mais conteúdo relacionado

Semelhante a EU 2016 - Gestão de Qualidade de Dados Cadastrais com FME

[Parfor] esw aula 04
[Parfor] esw   aula 04[Parfor] esw   aula 04
[Parfor] esw aula 04
César França
 
Status Report dos TCCs (SIN-NA8): 2º semestre de 2016
Status Report dos TCCs (SIN-NA8): 2º semestre de 2016Status Report dos TCCs (SIN-NA8): 2º semestre de 2016
Status Report dos TCCs (SIN-NA8): 2º semestre de 2016
Alessandro Almeida
 
A Automação dos Processos na Gestão de Performance das Aplicações por Gilbert...
A Automação dos Processos na Gestão de Performance das Aplicações por Gilbert...A Automação dos Processos na Gestão de Performance das Aplicações por Gilbert...
A Automação dos Processos na Gestão de Performance das Aplicações por Gilbert...
Joao Galdino Mello de Souza
 
Pam
PamPam
Software DimoMaint | Aplicado à Gestão da Manutenção | Apresentação
Software DimoMaint | Aplicado à Gestão da Manutenção  | ApresentaçãoSoftware DimoMaint | Aplicado à Gestão da Manutenção  | Apresentação
Software DimoMaint | Aplicado à Gestão da Manutenção | Apresentação
Soft Institute - Informática e Serviços, Lda
 
Qualidade de Software no século XXI
Qualidade de Software no século XXIQualidade de Software no século XXI
Qualidade de Software no século XXI
Bruno Penteado
 
Monitorando APIs REST com o Application Insights - .NET São Paulo - Junho-2018
Monitorando APIs REST com o Application Insights - .NET São Paulo - Junho-2018Monitorando APIs REST com o Application Insights - .NET São Paulo - Junho-2018
Monitorando APIs REST com o Application Insights - .NET São Paulo - Junho-2018
Renato Groff
 
Monitorando APIs REST com o Application Insights - .Azure Weekend 2018 - Camp...
Monitorando APIs REST com o Application Insights - .Azure Weekend 2018 - Camp...Monitorando APIs REST com o Application Insights - .Azure Weekend 2018 - Camp...
Monitorando APIs REST com o Application Insights - .Azure Weekend 2018 - Camp...
Renato Groff
 
Visão Geral sobre o Application Insights
Visão Geral sobre o Application InsightsVisão Geral sobre o Application Insights
Visão Geral sobre o Application Insights
André Dias
 
E manutx3 geral_junho
E manutx3 geral_junhoE manutx3 geral_junho
E manutx3 geral_junho
Grupo WSO
 
Monitorando aplicações Web com Application Insights, Logic Apps e Slack - Dev...
Monitorando aplicações Web com Application Insights, Logic Apps e Slack - Dev...Monitorando aplicações Web com Application Insights, Logic Apps e Slack - Dev...
Monitorando aplicações Web com Application Insights, Logic Apps e Slack - Dev...
Renato Groff
 
18.ago esmeralda 15.15_360_emg
18.ago esmeralda 15.15_360_emg18.ago esmeralda 15.15_360_emg
18.ago esmeralda 15.15_360_emg
itgfiles
 
(5) Padronizacao de cadastro e abreviatura de campos
(5) Padronizacao de cadastro e abreviatura de campos(5) Padronizacao de cadastro e abreviatura de campos
(5) Padronizacao de cadastro e abreviatura de campos
Portal KeyConsultas-web
 
Padronização de cadastros e abreviações em campos de dados
Padronização de cadastros e abreviações em campos de dadosPadronização de cadastros e abreviações em campos de dados
Padronização de cadastros e abreviações em campos de dados
KeySupport Consultoria e Informática Ltda
 
Programar Biometria Nitgen
Programar Biometria NitgenProgramar Biometria Nitgen
Programar Biometria Nitgen
psadeazevedo
 
Palestra eSocial - 30/mai/14 - Fiemg
Palestra eSocial - 30/mai/14 - FiemgPalestra eSocial - 30/mai/14 - Fiemg
Palestra eSocial - 30/mai/14 - Fiemg
Jose Adriano Pinto
 
Redução de perdas em sistemas de abastecimento de água
Redução de perdas em sistemas de abastecimento de águaRedução de perdas em sistemas de abastecimento de água
Redução de perdas em sistemas de abastecimento de água
ISA - Intelligent Sensing Anywhere
 
Status Report dos TCCs (SIN-NA7): 1º semestre de 2016
Status Report dos TCCs (SIN-NA7): 1º semestre de 2016Status Report dos TCCs (SIN-NA7): 1º semestre de 2016
Status Report dos TCCs (SIN-NA7): 1º semestre de 2016
Alessandro Almeida
 
Métricas e Indicadores baseados na ITIL
Métricas e Indicadores baseados na ITILMétricas e Indicadores baseados na ITIL
Métricas e Indicadores baseados na ITIL
CompanyWeb
 
DevDay 2017 - Belo Horizonte - Application Insights
DevDay 2017 - Belo Horizonte - Application InsightsDevDay 2017 - Belo Horizonte - Application Insights
DevDay 2017 - Belo Horizonte - Application Insights
André Dias
 

Semelhante a EU 2016 - Gestão de Qualidade de Dados Cadastrais com FME (20)

[Parfor] esw aula 04
[Parfor] esw   aula 04[Parfor] esw   aula 04
[Parfor] esw aula 04
 
Status Report dos TCCs (SIN-NA8): 2º semestre de 2016
Status Report dos TCCs (SIN-NA8): 2º semestre de 2016Status Report dos TCCs (SIN-NA8): 2º semestre de 2016
Status Report dos TCCs (SIN-NA8): 2º semestre de 2016
 
A Automação dos Processos na Gestão de Performance das Aplicações por Gilbert...
A Automação dos Processos na Gestão de Performance das Aplicações por Gilbert...A Automação dos Processos na Gestão de Performance das Aplicações por Gilbert...
A Automação dos Processos na Gestão de Performance das Aplicações por Gilbert...
 
Pam
PamPam
Pam
 
Software DimoMaint | Aplicado à Gestão da Manutenção | Apresentação
Software DimoMaint | Aplicado à Gestão da Manutenção  | ApresentaçãoSoftware DimoMaint | Aplicado à Gestão da Manutenção  | Apresentação
Software DimoMaint | Aplicado à Gestão da Manutenção | Apresentação
 
Qualidade de Software no século XXI
Qualidade de Software no século XXIQualidade de Software no século XXI
Qualidade de Software no século XXI
 
Monitorando APIs REST com o Application Insights - .NET São Paulo - Junho-2018
Monitorando APIs REST com o Application Insights - .NET São Paulo - Junho-2018Monitorando APIs REST com o Application Insights - .NET São Paulo - Junho-2018
Monitorando APIs REST com o Application Insights - .NET São Paulo - Junho-2018
 
Monitorando APIs REST com o Application Insights - .Azure Weekend 2018 - Camp...
Monitorando APIs REST com o Application Insights - .Azure Weekend 2018 - Camp...Monitorando APIs REST com o Application Insights - .Azure Weekend 2018 - Camp...
Monitorando APIs REST com o Application Insights - .Azure Weekend 2018 - Camp...
 
Visão Geral sobre o Application Insights
Visão Geral sobre o Application InsightsVisão Geral sobre o Application Insights
Visão Geral sobre o Application Insights
 
E manutx3 geral_junho
E manutx3 geral_junhoE manutx3 geral_junho
E manutx3 geral_junho
 
Monitorando aplicações Web com Application Insights, Logic Apps e Slack - Dev...
Monitorando aplicações Web com Application Insights, Logic Apps e Slack - Dev...Monitorando aplicações Web com Application Insights, Logic Apps e Slack - Dev...
Monitorando aplicações Web com Application Insights, Logic Apps e Slack - Dev...
 
18.ago esmeralda 15.15_360_emg
18.ago esmeralda 15.15_360_emg18.ago esmeralda 15.15_360_emg
18.ago esmeralda 15.15_360_emg
 
(5) Padronizacao de cadastro e abreviatura de campos
(5) Padronizacao de cadastro e abreviatura de campos(5) Padronizacao de cadastro e abreviatura de campos
(5) Padronizacao de cadastro e abreviatura de campos
 
Padronização de cadastros e abreviações em campos de dados
Padronização de cadastros e abreviações em campos de dadosPadronização de cadastros e abreviações em campos de dados
Padronização de cadastros e abreviações em campos de dados
 
Programar Biometria Nitgen
Programar Biometria NitgenProgramar Biometria Nitgen
Programar Biometria Nitgen
 
Palestra eSocial - 30/mai/14 - Fiemg
Palestra eSocial - 30/mai/14 - FiemgPalestra eSocial - 30/mai/14 - Fiemg
Palestra eSocial - 30/mai/14 - Fiemg
 
Redução de perdas em sistemas de abastecimento de água
Redução de perdas em sistemas de abastecimento de águaRedução de perdas em sistemas de abastecimento de água
Redução de perdas em sistemas de abastecimento de água
 
Status Report dos TCCs (SIN-NA7): 1º semestre de 2016
Status Report dos TCCs (SIN-NA7): 1º semestre de 2016Status Report dos TCCs (SIN-NA7): 1º semestre de 2016
Status Report dos TCCs (SIN-NA7): 1º semestre de 2016
 
Métricas e Indicadores baseados na ITIL
Métricas e Indicadores baseados na ITILMétricas e Indicadores baseados na ITIL
Métricas e Indicadores baseados na ITIL
 
DevDay 2017 - Belo Horizonte - Application Insights
DevDay 2017 - Belo Horizonte - Application InsightsDevDay 2017 - Belo Horizonte - Application Insights
DevDay 2017 - Belo Horizonte - Application Insights
 

Mais de Inovação GIS - Tecnologia da Informação

PROJETO DE MONITORAMENTO DE TARTARUGAS MARINHAS (PMTM) PORTO DO AÇÚ
PROJETO DE MONITORAMENTO DE TARTARUGAS MARINHAS (PMTM) PORTO DO AÇÚPROJETO DE MONITORAMENTO DE TARTARUGAS MARINHAS (PMTM) PORTO DO AÇÚ
PROJETO DE MONITORAMENTO DE TARTARUGAS MARINHAS (PMTM) PORTO DO AÇÚ
Inovação GIS - Tecnologia da Informação
 
PROJETO DE MONITORAMENTO DA PESCA PORTO DO AÇÚ
PROJETO DE MONITORAMENTO DA PESCA PORTO DO AÇÚPROJETO DE MONITORAMENTO DA PESCA PORTO DO AÇÚ
PROJETO DE MONITORAMENTO DA PESCA PORTO DO AÇÚ
Inovação GIS - Tecnologia da Informação
 
FME na Celesc – Ganho na automação dos processos
FME na Celesc – Ganho na automação dos processosFME na Celesc – Ganho na automação dos processos
FME na Celesc – Ganho na automação dos processos
Inovação GIS - Tecnologia da Informação
 
Uso de ETL na integração de dados geoespaciais nas atividades de planejament...
 Uso de ETL na integração de dados geoespaciais nas atividades de planejament... Uso de ETL na integração de dados geoespaciais nas atividades de planejament...
Uso de ETL na integração de dados geoespaciais nas atividades de planejament...
Inovação GIS - Tecnologia da Informação
 
Relatórios automatizados utilizando FME
Relatórios automatizados utilizando FMERelatórios automatizados utilizando FME
Relatórios automatizados utilizando FME
Inovação GIS - Tecnologia da Informação
 
SharperDataBI
SharperDataBI SharperDataBI
FME na Comgás – Automação de processos
FME na Comgás – Automação de processosFME na Comgás – Automação de processos
FME na Comgás – Automação de processos
Inovação GIS - Tecnologia da Informação
 
IMPACTOS DA CONVERSÃO DE DADOS GEOESPACIAIS NA GESTÃO DOS IMÓVEIS PÚBLICOS FE...
IMPACTOS DA CONVERSÃO DE DADOS GEOESPACIAIS NA GESTÃO DOS IMÓVEIS PÚBLICOS FE...IMPACTOS DA CONVERSÃO DE DADOS GEOESPACIAIS NA GESTÃO DOS IMÓVEIS PÚBLICOS FE...
IMPACTOS DA CONVERSÃO DE DADOS GEOESPACIAIS NA GESTÃO DOS IMÓVEIS PÚBLICOS FE...
Inovação GIS - Tecnologia da Informação
 
Sabesp FME 2018
Sabesp FME 2018Sabesp FME 2018
Casos de uso do FME no IBGE
Casos de uso do FME no IBGECasos de uso do FME no IBGE
Casos de uso do FME no IBGE
Inovação GIS - Tecnologia da Informação
 
Novidades fme 2018
Novidades fme 2018Novidades fme 2018
Fme e bigdata
Fme e bigdataFme e bigdata
Automatizando processo utilizando workflow
Automatizando processo utilizando workflowAutomatizando processo utilizando workflow
Automatizando processo utilizando workflow
Inovação GIS - Tecnologia da Informação
 
Apresentação SPU
Apresentação SPUApresentação SPU
Automatizando no FME server
Automatizando no FME serverAutomatizando no FME server
Automatizando no FME server
Inovação GIS - Tecnologia da Informação
 
Apresentação IBGE
Apresentação IBGEApresentação IBGE
Apresentação Comgás
Apresentação ComgásApresentação Comgás
Apresentação Transpetro
Apresentação  TranspetroApresentação  Transpetro
Web services melhores praticas para Integração
Web services melhores praticas para Integração Web services melhores praticas para Integração
Web services melhores praticas para Integração
Inovação GIS - Tecnologia da Informação
 
Novidades FME 2017
Novidades FME 2017Novidades FME 2017

Mais de Inovação GIS - Tecnologia da Informação (20)

PROJETO DE MONITORAMENTO DE TARTARUGAS MARINHAS (PMTM) PORTO DO AÇÚ
PROJETO DE MONITORAMENTO DE TARTARUGAS MARINHAS (PMTM) PORTO DO AÇÚPROJETO DE MONITORAMENTO DE TARTARUGAS MARINHAS (PMTM) PORTO DO AÇÚ
PROJETO DE MONITORAMENTO DE TARTARUGAS MARINHAS (PMTM) PORTO DO AÇÚ
 
PROJETO DE MONITORAMENTO DA PESCA PORTO DO AÇÚ
PROJETO DE MONITORAMENTO DA PESCA PORTO DO AÇÚPROJETO DE MONITORAMENTO DA PESCA PORTO DO AÇÚ
PROJETO DE MONITORAMENTO DA PESCA PORTO DO AÇÚ
 
FME na Celesc – Ganho na automação dos processos
FME na Celesc – Ganho na automação dos processosFME na Celesc – Ganho na automação dos processos
FME na Celesc – Ganho na automação dos processos
 
Uso de ETL na integração de dados geoespaciais nas atividades de planejament...
 Uso de ETL na integração de dados geoespaciais nas atividades de planejament... Uso de ETL na integração de dados geoespaciais nas atividades de planejament...
Uso de ETL na integração de dados geoespaciais nas atividades de planejament...
 
Relatórios automatizados utilizando FME
Relatórios automatizados utilizando FMERelatórios automatizados utilizando FME
Relatórios automatizados utilizando FME
 
SharperDataBI
SharperDataBI SharperDataBI
SharperDataBI
 
FME na Comgás – Automação de processos
FME na Comgás – Automação de processosFME na Comgás – Automação de processos
FME na Comgás – Automação de processos
 
IMPACTOS DA CONVERSÃO DE DADOS GEOESPACIAIS NA GESTÃO DOS IMÓVEIS PÚBLICOS FE...
IMPACTOS DA CONVERSÃO DE DADOS GEOESPACIAIS NA GESTÃO DOS IMÓVEIS PÚBLICOS FE...IMPACTOS DA CONVERSÃO DE DADOS GEOESPACIAIS NA GESTÃO DOS IMÓVEIS PÚBLICOS FE...
IMPACTOS DA CONVERSÃO DE DADOS GEOESPACIAIS NA GESTÃO DOS IMÓVEIS PÚBLICOS FE...
 
Sabesp FME 2018
Sabesp FME 2018Sabesp FME 2018
Sabesp FME 2018
 
Casos de uso do FME no IBGE
Casos de uso do FME no IBGECasos de uso do FME no IBGE
Casos de uso do FME no IBGE
 
Novidades fme 2018
Novidades fme 2018Novidades fme 2018
Novidades fme 2018
 
Fme e bigdata
Fme e bigdataFme e bigdata
Fme e bigdata
 
Automatizando processo utilizando workflow
Automatizando processo utilizando workflowAutomatizando processo utilizando workflow
Automatizando processo utilizando workflow
 
Apresentação SPU
Apresentação SPUApresentação SPU
Apresentação SPU
 
Automatizando no FME server
Automatizando no FME serverAutomatizando no FME server
Automatizando no FME server
 
Apresentação IBGE
Apresentação IBGEApresentação IBGE
Apresentação IBGE
 
Apresentação Comgás
Apresentação ComgásApresentação Comgás
Apresentação Comgás
 
Apresentação Transpetro
Apresentação  TranspetroApresentação  Transpetro
Apresentação Transpetro
 
Web services melhores praticas para Integração
Web services melhores praticas para Integração Web services melhores praticas para Integração
Web services melhores praticas para Integração
 
Novidades FME 2017
Novidades FME 2017Novidades FME 2017
Novidades FME 2017
 

EU 2016 - Gestão de Qualidade de Dados Cadastrais com FME

  • 1. Gestão de Qualidade de Dados Cadastrais com FME Nagip César Abrahão Adriana Xavier de Menezes Golsalves Airton Minoru Shinto Sabesp
  • 2. Sabesp Célula de GeoInformação Nagip César Abrahão Adriana Xavier de Menezes Golsalves Airton Minoru Shinto
  • 3. Diretoria Metropolitana Unidades de Negócio Não Operados
  • 4. Outros usos do FME na Sabesp Prova de Conceito: Identificação de Piscinas Estudos Solicitados: Crise Hídrica: Polígonos “de Crise” Utilizações de FME em vigor: Reposicionamento de Ligações na Face da Quadra a partir de LigGeo Renomeação de Imagens de Fotos obtidas com Global ID para RGI No dia-a-dia: transformações dbf, csv, xls, Kml, projeções e sistemas de coordenadas
  • 5. Pontos principais: Gestão de Qualidade de Dados utilizando o FME
  • 6. Fluxo Dados de entrada (SBS/Smallworld): Tubulações de Distribuição Limite de Unidades de Negócio Arquivo de Saída (CSV): Erros/Avisos por Objeto, por UN, por Usuário
  • 7. O PlugIn SBS permite a leitura e a escrita em Smallworld. A correção do erro pode ser feita diretamente como saída do Fluxo FME.
  • 8. Transformers Deaggregator + Geometry Filter Detecção de Poli Arcos Tester Campos Vazios, Campos Contraditórios Matcher Duplicidades
  • 9.
  • 10. Comprimento real não está preenchido Proprietário não está preenchido Diâmetro não está preenchido Material não está preenchido Data de Instalação não está preenchido Compr Calculado menor que 1 m
  • 11. Geometria Irregular (Poliarcos) Comprimento Real Muito Diferente do Calculado (Parametrizável) Diâmetro Pouco Usual (menor que 10 mm) Tubulação Não Circular com Diâmetro (Seção Retangular) Tubulação Circular com Dimensões da Secção Material pouco usual ou grafado incorretamente Data de Instalação/Abandono Futura Outros Testes deste fluxo e de outros fluxos: Tubulações Desconectadas Tubulações Conectadas Somente Numa Extremidade
  • 16. Qualidade de Dados no Signos Antes • QA/QC por trilho – processo demorado e executado pelo usuário; relatórios por tipo de erro Depois • Fluxo automatizado – executado corporativamente; relatórios por objeto
  • 17. Qualidade de Dados no Signos Antes • Não há acompanhamento nem indicadores associados; periodicidade indefinida Depois • Indicadores por UN e por usuário; periodicidade definida e execução autônoma
  • 18. Qualidade de Dados no Signos Antes • Pouca flexibilidade de testes e parametrizações customizadas sobre código Smallworld. Depois • Fluxo “Modular”, com facilidade para implementar novos testes, mudar parâmetros e aperfeiçoar as verificações
  • 19. Obrigado! Nagip César Abrahão nabraao@sabesp.com.br Adriana Xavier de Menezes Golsalves agonsalves@sabesp.com.br Airton Minoru Shinto ashinto@sabesp.com.br