Data Quality e ETL com a DataMotion

Powered by

Qualidade e Tratamento de Dados
Produto e Serviços

©2013 DataMotion Tecnologia. Todos direitos reservados
DataMotion Tecnologia
Rua Gomes de Carvalho 1327 – 11 andar
CEP 04547-005 – São Paulo – SP - Brazil
Tel.: (55 11) 3842-2616

Sobre a DataMotion
Fundação em: • 2005

Matriz: • São Paulo, Brasil
(com clientes também na América Latina, USA e Europa)

Quem somos: • Especialistas em tecnologia para dados
• Provedor de soluções em Tratamento, Enriquecimento e
Integração de Dados
• Líder em tecnologia para Data Quality
• Mais de 30 funcionários
• Diversas empresas multinacionais como clientes
• Time gerencial altamente qualificado, com experiência em
projetos internacionais


Produtos e Serviços
A DataMotion oferece soluções personalizadas e completas, voltadas às áreas de TI, Integração de
Dados, CRM e Database Marketing. A DataMotion possui o expertise necessário para atender as
demandas relacionadas a gestão corporativa da qualidade da informação, projetos de migração de
dados, MDM, Web Services e processamentos sob medida.

ENRIQUECIMENTO CAPTURA DE
DATA QUALITY
DE DADOS DADOS

INTEGRAÇÃO GESTÃO DA
DE DADOS INFORMAÇÃO

DATABASE DATA MIGRAÇÃO
MARKETING WAREHOUSE DE DADOS


Tecnologia de ETL e Qualidade de Dados

Domínio das principais tecnologias do mercado Roda nos ambientes
-Ambiente .Net, C#, Java, Python, PHP › Windows
› Linux
-XML SOAP Web Services, JSON REST
› HP-UX
-SQLServer, Oracle, MySQL, etc › AIX
› IBM AS/400
› Solaris
Plataforma de ETL que domina seus dados › Mac OS X
Extract – Transform – Load
-Lê de uma ou mais fontes de dados
-Transforma dados em qualquer formato
imaginável
-Grava e atualiza dados em qualquer base
de destino


Tratamento de Dados
Processos de Validação e Filtros de Dados

Conteúdos Geográficos

Tratamento de endereços – padronização e auditoria de conteúdo
Validação e atualização de CEP utilizando base do DNE dos Correios

Separação e padronização dos componentes do logradouro (tipo de
logradouro, logradouro, número, complemento, Bairro, CEP, Cidade e UF)

Georreferenciamento a partir do endereço

Abragência de tratamento para todos os países da América Latina


Tratamento de Dados
Nomes
Atribuição de gênero (sexo)
Identificação de tipo de pessoa – física ou jurídica
Identificação de palavrões – nomes incorretamente digitados
Separação de nome composto, primeiro nome, nome do meio e último nome

Telefones
Tratamento de Telefones – validação e atualização de DDDs e prefixos

Documentos
Validação do dígito de controle e formatação de CNPJ, CPF e Inscrição Estadual

E-mail
Verificação e consistência no conteúdo do campo e-mail
Ping para verificação da existência do domínio


Tratamento de Dados
Campos genéricos
Padronização e formatação de campos genéricos como Cargos, Tabela de
Produtos, Parentesco, Estado Civil, etc...
Integração com expressões regulares (RegExp)

MatchCode
Identificação de registros duplicados no cadastro e Visão única de Cliente
Parametrização e regras de negócios customizáveis
Criação de MatchKeys Fonéticas
Geração de arquivo DE/PARA
Merge & Purge em campanhas de Marketing/CRM
Householding


Simulação de um Processamento


Modelo Ideal de Integração


ETL com Qualidade de Dados


Integração sem Limites

Microsoft .Net and Java Integração de Dados

Data Modeling CRM and Analytics Reports Security
XML Web Services

Base de Dados Corporativa

Tratamento e Execução em Batch

O DataMotion pode tratar em
batch virtualmente qualquer
tipo de formato de arquivo


Tratamento de Nome/Empresa

Tratamento de nomes,
empresas, acentuação,
identificação de gênero e
nomes duplos


Tratamento de Endereço

Reconhecimento de múltiplos
formatos de preenchimento e
de localização geográfica


Busca de Logradouros e CEPs

Busca de logradouros
utilizando padrões fonéticos
de reconhecimento e escrita


Tratamento de Telefone

Tratamento simultâneo de
vários telefones em um único
campo de entrada


Geo-Localização


Análise da Similaridade de Conteúdos

O Processo de Análise da
Similaridade pode ser
utilizado para todo tipo de
conteúdo cadastral.

Processo ideal para análise
de fraude, integração e
migração de dados


Data Quality na Web
O DataMotion Web permite a
execução de tratamento de
dados sob medida via browser


DataMotion SDK no Visual Studio

Aplicação escrita em C#
utilizando as APIs do
DataMotion


Data Quality XML Web Service


Data Quality XML Web Service - Autorizador Fiscal

CPF : Nome e Situação do CPF

CNPJ : Razão Social, Endereço,
CNAE, Natureza Jurídica, Data de
Abertura, Situação do CNPJ,
Inscrição Estadual, Situação da
Inscrição Estadual


CloverETL
IDE que permite rápido
desenvolvimento, com testes
e execução.
Visual job designer
Definição dos Metadata
Validação de job
Inspeção de dados
Validação de regras
Estatísticas
Captura do log
XML storage aberto
Integração com server


CloverETL Server

Ambiente de execução com
automação, gerenciamento
e integração.
Monitoramento
Scheduling
Dependências
Segurança
Gatilhos Real-time
API (SOAP/REST/Java
JMX)


CloverETL Engine

A core library monta e executa os
jobs do CloverETL
Extensa arquitetura de plugin
Multi threaded
Paralelismo
Baixo footprint
Static Java codebase
Jobs em Java ou XML


DataMotion integrado ao CloverETL


Data Quality Dashboards
Desenvolvimento de soluções customizadas de Dashboards


DataMotion Tecnologia
Rua Gomes de Carvalho 1327 – 11 andar
CEP 04547-005 – São Paulo – SP - Brasil
(55 11) 3842-2616

http://www.datamotion.com.br


Data Quality e ETL com a DataMotion

Recomendados

Recomendados

Mais conteúdo relacionado

Semelhante a Data Quality e ETL com a DataMotion

Semelhante a Data Quality e ETL com a DataMotion (20)

Data Quality e ETL com a DataMotion