O documento discute a importância do log para as empresas na era digital. O log pode fornecer informações valiosas sobre o comportamento dos clientes e desempenho dos sistemas que podem ser usadas para melhorar o negócio e aumentar os lucros. Além disso, o armazenamento adequado dos logs é essencial para atender aos requisitos da Lei Geral de Proteção de Dados.

1.
e-Book
Retorno sobre o Log (EoL):
Uma nova forma de medir o
negócio na era digital
Techrom Tecnologia
Setembro, 2019
www.techrom.co

2.
Introdução
1. Novos dilemas
2. Valorização das empresas que investem em iniciativas digitais
3. Como utilizar o log para o negócio
4. Importância do log para a Lei Geral de Proteção de Dados (LGPD)
5. Conclusão
6. Referências
7. Appendix
A ​Techrom​ é uma startup com foco em data streaming baseada na tecnologia Apache Kafka 1

3.
1. Novos dilemas
A obsessão por conhecer todos os rastros e interesses dos consumidores tem crescido nos
últimos anos em função da proliferação do acesso à internet, mudanças de consumo,
fragmentação dos canais digitais, crescimento exponencial do volume de dados e surgimento de
novos modelos de ofertas.
Entretanto, novos concorrentes com modelos de negócios mais flexíveis e com estruturas mais
enxutas, a pressão para atender às novas demandas dos consumidores além do impacto da
nova legislação para o controle de acesso aos dados fazem com que as empresas passem a ter
uma atenção especial à infraestrutura de tecnologia para adaptar a nova dinâmica do mercado.
A ​Techrom​ é uma startup com foco em data streaming baseada na tecnologia Apache Kafka 2

4.
Neste novo cenário, o log passa ter uma função chave para decifrar o comportamento do
usuário, como também assegurar o controle sobre os dados.
O que é o log ? Qual é a sua utilidade? O que impacta para o negócio?
Log é um registro do histórico de acesso à um determinado sistema feito por um usuário. Para
exemplificar, quando acessamos o banco através de um aplicativo móvel (​mobile app​), o sistema
gera um evento / log com o dia, horário e o que foi feito durante o acesso.
Cada interação que o usuário realiza nos canais digitais proprietários da empresa gera um
evento que capturado, processado e analisado, transforma-o em uma informação valiosa.
A somatória de todos os eventos permite que a empresa extraia diversas informações táticas,
tais como :
★ Histórico de acessos;
★ Produtos ou categorias com maior acesso;
★ Tempo médio de interação;
★ Valor médio de compra;
★ Perfil de acesso por gênero, idade, região e cidade.
Além das informações táticas, o time executivo poderá utilizar recursos sofisticados como o
Machine Learning​ e gerar alguns ​insights​ estratégicos dentre eles:
➢ Análise preditiva de demanda x preço;
➢ Análise preditiva de comportamento de compra;
➢ Dimensionamento da operação com base no modelo preditivo;
➢ Análise de risco do negócio.
Diante da transformação digital que as corporações têm passado nos últimos anos, um dos
desafios é como rentabilizar a enorme base de dados que cresce a cada minuto.
Um novo conceito que poderá despertar interesse por parte dos ​C-Levels​ como um novo índice
operacional será o Earning of Log (​EoL​) ou Retorno sobre o Log (RoL).
A ​Techrom​ é uma startup com foco em data streaming baseada na tecnologia Apache Kafka 3

5.
O retorno sobre o log (RoL) pode ser mensurado de algumas formas:
❖ Ganho de produtividade do time com a gestão eficiente de logs​: O volume de logs
gerados pelos diversos sistemas que as empresas utilizam é enorme e, quando é preciso
identificar algum problema em um determinado sistema para analisar falhas, o time de
tecnologia pode levar horas e/ou dias para pesquisar as evidências geradas para
diagnosticar o problema e tomar uma ação. Dependendo da criticidade do sistema,
poderá gerar prejuízos financeiros;
❖ Redução do percentual de retenção de clientes (churn)​: Com a fragmentação dos canais
de interação que os clientes têm com as marcas atualmente, é um desafio para as
empresas mapearem os acessos, assegurarem a confiabilidade dos dados e gerarem
insights para a tomada de decisão. A guarda dos logs das interações é fundamental para
analisar o comportamento e tomar ações para melhorar o índice de retenção de clientes;
❖ Operações fraudulentas​: Temos visto vários problemas como ataques externos (Ex.:
hackers), transações irregulares como também roubo de informações dentro das
empresas. Com a evolução dos negócios digitais, os crimes têm crescido
exponencialmente além da sofisticação. É imprescindível que as empresas invistam em
ferramentas que possam monitorar, em tempo real, as evidências (logs) para tomadas de
ações rápidas em casos de anomalias, a fim de evitar prejuízos financeiros;
❖ Otimizar a infraestrutura de tecnologia​: Com o volume crescente de dados a cada ano, as
empresas têm revisado constantemente a capacidade da infraestrutura de tecnologia
para suprir a demanda. Entretanto, sem um acompanhamento do real uso dos
equipamentos através da análise de logs para identificar a carga utilizada, pode haver o
desperdício de dinheiro com a subutilização de máquinas impactando no resultado
financeiro do negócio;
❖ Capacidade de lançar novos produtos de forma ágil​: Ter capacidade de respostas
rápidas às mudanças constantes de mercado pode impactar positivamente no resultado
financeiro da empresa. Neste sentido, a utilização dos logs como parte das informações a
serem estudadas para identificar comportamentos, tendências e antever possíveis
problemas tornam-se essenciais para que as empresas possam melhorar seus índices
financeiros.
A ​Techrom​ é uma startup com foco em data streaming baseada na tecnologia Apache Kafka 4

6.
2. Valorização das empresas que investem em
iniciativas digitais
No artigo publicado em Julho deste ano pela revista Harvard Business Review, escrito pelo
professor Suraj Srinivasan, da Harvard Business School, as empresas que investiram em
iniciativas digitais tiveram o retorno sobre o valor investido em ações (​price-to-earnings ratio​), em
Dólares, ​de 30% à 90%​ maiores que as empresa que não investiram​.
Um exemplo de empresa que tem obteve ganhos com as iniciativas digital é a fabricante
americana de máquinas Caterpillar. A empresa tem realizado investimentos desde 2015 em
automatização de análise e diagnóstico do negócio e, com isso, obteve o retorno sobre o valor
investido na ação, em Dólares, ​de 250%​.
Na análise do professor, os ganhos das empresas que têm investido no digital são reflexos dos
impactos positivos nas vendas, como também o aumento da competição que tem forçado as
empresas serem mais eficientes.
Além disso, o valor das empresas (​Valuation​) têm incrementado ​de 4% à 12%​ devido ao melhor
desempenho dos negócios que os investimentos em digital têm agregado.
A ​Techrom​ é uma startup com foco em data streaming baseada na tecnologia Apache Kafka 5

7.
O estudo realizado pelo World Economic Forum, em 2018, mostra que os investimentos
realizados em iniciativas digitais têm impactado positivamente no Ebitda das empresas.
O gráfico acima mostra que a cada US$ 1 investido em digital gera o retorno de ​US$ 2,2 (120%
do capital investido) ​na análise consolidada.
O impacto positivo no negócio com o investimento em digital é fruto da:
➔ Utilização dos dados gerados para aumentar as vendas;
➔ Automatização de atividades manuais de baixo valor ao negócio;
➔ Aumento dos índices de produtividade da empresa;
➔ Criação de novos modelos de negócios;
➔ Monitoramento, em tempo real, da operação para explorar novas oportunidades de
mercado.
A ​Techrom​ é uma startup com foco em data streaming baseada na tecnologia Apache Kafka 6

8.
O gráfico acima aponta a cada US$ 1 investido, por indústria, qual é o impacto no Ebitda. O
segmento Químico tem se beneficiado com as iniciativas digitais devido ao ganho com a
produtividade.
A ​Techrom​ é uma startup com foco em data streaming baseada na tecnologia Apache Kafka 7

9.
O consultor Lyndon Hedderly, da empresa americana Confluent, cita o exemplo da Netflix como
uma referência de uso do log para proporcionar uma melhor experiência para os consumidores
e, por consequência, tem gerado valor para seus acionistas.
A Netflix colocou o log como o fator central para conhecer o comportamento dos seus usuários e
prover recomendações assertivas resultando em uma valorização de mais de ​3000%​ das suas
ações em 10 anos.
O que está por trás deste crescimento? Alguns pontos como:
❖ Uso do conceito de Customer 360 para mapear 100% das interações dos usuários na
plataforma e realizar uma série de análises de comportamentos de consumo, frequência,
horários, além de saber através de quais dispositivos acessam a plataforma;
❖ Através dos logs, a empresa consegue gerenciar melhor a sua operação e ter resiliência
na sua infraestrutura de tecnologia para atender as demandas do negócio;
❖ Com o uso de tecnologias como Apache Kafka, a Netflix acompanha, em tempo real, uma
série de métricas para direcionar os investimentos necessários para seu crescimento
assim como tornar mais eficiente a gestão do negócio;
❖ O modelo de negócio permite escalar sem perder o controle sobre os logs, fazendo com
que a Netflix maximize as oportunidades.
A ​Techrom​ é uma startup com foco em data streaming baseada na tecnologia Apache Kafka 8

10.
3. Como utilizar o log para o negócio
Fazendo um paralelo com as peças do Lego, as empresas devem repensar suas estruturas de
tecnologias para torná-las versáteis, permitindo agilidade e flexibilidade para atender às novas
demandas das áreas de negócios.
Por que a necessidade de repensar a infraestrutura como um Lego?
Simples conexão com vários sistemas​: Atualmente, as empresas precisam se conectar
com novos sistemas (seja interno ou de parceiros) o que exige a criação de conectores (ou API)
para simplificar e agilizar a troca de dados. Além disso, os departamentos internos também têm
demandado acessos cada vez mais frequentes às bases de dados para análises, o que exige
uma flexibilidade do compartilhamento dos bancos de dados;
Modularização de sistemas:​ Novas arquiteturas de sistemas modulares (conhecida como
Microservices​) têm ganhado a adesão nas empresas devido ao desenvolvimento simultâneo por
várias pessoas, agilidade de lançar novos serviços, realização de manutenção e atualizações
sem impactar no sistema como um todo;
Criação do Datahub​: Com volume crescente dos dados gerados por vários canais,
algumas empresas têm criado um datahub interno para centralizar e unificar a base. O datahub
pode ser útil tanto para o uso de novas tecnologias (ex.: sensores inteligentes) quanto no
gerenciamento dos dados através de multi provedores de ​cloud-computing​;
A ​Techrom​ é uma startup com foco em data streaming baseada na tecnologia Apache Kafka 9

11.
A nova realidade cria uma oportunidade das empresas rentabilizarem as suas bases de dados
através de todo o histórico gerado pelas comporações. Com isso, a utilização de ferramentas
para extrair os insights dos dados, acrescido da experiência do time para interpretar e analisar as
informações, torna um ativo precioso para as empresas explorarem novos modelos, realizarem
melhorias operacionais, identificarem tendências assim como comportamentos dos
consumidores.
Neste contexto, os logs são cruciais para a análise de dados, uma vez que gera todas as
evidências de comportamentos, sejam de pessoas ou de sistemas.
Para o uso eficiente, é preciso:
Definir os objetivos em relação ao uso do log como também os logs que serão úteis
para a estratégia do negócio;
Captar os logs que impactam o negócio, processar no menor tempo possível e gerar as
métricas para que as lideranças tomem as decisões no momento oportuno;
Utilizar ferramentas e estruturas de tecnologias que tragam resiliência ao negócio e
que automatizem a gestão dos logs;
Centralizar todos os logs em um único repositório para obter uma visão 360 do
negócio, além de eliminar ilhas de dados espalhados pela empresa.
A ​Techrom​ é uma startup com foco em data streaming baseada na tecnologia Apache Kafka 10

12.
4. A importância do log para a LGPD
Com a nova Lei Geral de Proteção de Dados, que entrará em vigor a partir de Agosto de 2020,
toda e qualquer evidência de registro do usuário com os canais proprietários da empresa deverá
ser armazenado.
De acordo com o guia de gestão de log desenvolvido pelo Instituto Nacional de Tecnologia dos
Estados Unidos, o gerenciamento dos logs permite que as empresas acompanhem todas as
interações realizadas (sejam de funcionários ou de clientes) nos sistemas, identifiquem possíveis
problemas, como também falhas de segurança, auditem as evidências de acessos e gerem
relatórios para os órgãos regulatórios quando requeridos.
Do ponto de vista da Lei número 13.853, o capítulo VII fala sobre a necessidade de "adotar
medidas de segurança, técnicas e administrativas aptas a proteger os dados pessoais de
acessos não autorizados e de situações acidentais ou ilícitas de destruição, perda, alteração,
comunicação ou qualquer forma de tratamento inadequado ou ilícito."
Para adequar a infraestrutura de tecnologia à nova lei, as empresas deverão:
➢ Transparência​: Deixar transparente para os usuários a captura dos eventos (logs) em
toda interação feita;
➢ Segurança​: As empresas deverão implantar novos procedimentos de segurança para
assegurar que os logs não sejam acessados de forma indevida, assim como eliminar
potenciais riscos de perda dos dados;
➢ Acesso aos dados​: Permitir que os titulares das informações acessem seus dados
quando requisitados;
➢ Incidente​: As empresas deverão informar as autoridades sobre a ocorrência de
incidentes de segurança que possam acarretar riscos ou danos relevantes aos usuários;
➢ Governança dos dados​: Implantar política de uso, segurança, tratamento e mitigação de
riscos dos dados coletados dos usuários.
A ​Techrom​ é uma startup com foco em data streaming baseada na tecnologia Apache Kafka 11

13.
Uma vez que os logs contém todo o histórico das interações, é fundamental a gestão eficiente
para assegurar a confidencialidade e a integridade dos dados.
Exemplificando numa situação cotidiana: quando a empresa capta o histórico de navegação
conectado com o email que o usuário registrou durante a sua jornada no site, esse evento gera
um log que será armazenado numa base de dados ou no sistema de CRM. Esse log deverá ser
guardado dentro da política de segurança e de governança de dados que a empresa possui para
efeito de uso das autoridades governamentais ou para a disponibilização para o usuário quando
requisitado.
O exemplo exposto acima, embora simples, retrata a realidade de uma parcela representativa de
empresas que adotam esse mecanismo e que deverão estruturar suas políticas de governança
de dados para evitar penalidades.
Com isso, a gestão dos logs passará a ser primordial para a segurança das informações.
A ​Techrom​ é uma startup com foco em data streaming baseada na tecnologia Apache Kafka 12

14.
5. Conclusão
Será que, num futuro próximo, os analistas financeiros avaliarão o retorno sobre o log (EoL) das
empresas, além dos demais índices como ROI, ROE, etc.,? Talvez possamos caminhar para esse
cenário.
O ponto é que os dados são hoje vitais para a saúde do negócio. Contudo, não basta ter bilhões
de bytes armazenados se existe complexidade para acessá-los, ou o time não saiba o que fazer
com os dados.
É imprescindível repensar a infraestrutura de tecnologia para torná-la ágil, modular e flexível, e
atender às novas demandas do mercado.
As empresas devem considerar :
- A exploração, de forma segura e transparente, o conceito Customer 360 que permita a
rentabilização de cada log gerado via interação dos clientes e ​incremente a receita​ do
negócio;
- A troca de informações, via API, com os seus parceiros de negócios que possam tornar
eficiente a gestão do estoque, a entrega, o sortimento de produtos e a diminuição de
perdas / desperdícios, resultando na ​redução de custos ​da operação​;
- A mitigação dos riscos relacionados à operações fraudulentas, ataques externos
(hackers) e furtos de informações internas para ​eliminar prejuízos​ ao negócio;
- O processamento com o menor tempo possível dos dados para gerar métricas, em tempo
real, a fim de explorar oportunidades que ​impactem positivamente​ ​na​ ​receita​ e ​no​ ​lucro,
como também ​eliminem riscos de perda​ para a empresa;
- O aumento da produtividade do time com a automatização de processos manuais que
não agregam nenhum valor ao negócio e contribua para acelerar o lançamento de novos
produtos e serviços que possam resultar ​no aumento​ de ​receita​ e ​na​ ​redução​ do ​custo​.
Por fim, é preciso ter em mente que cada log capturado, processado, analisado e armazenado
poderá impactar em ponto percentual no futuro índice EoL. Em outras palavras, as empresas
devem ter uma olhar estratégico em cada dado gerado para monetizá-lo no futuro.
A ​Techrom​ é uma startup com foco em data streaming baseada na tecnologia Apache Kafka 13

15.
6. Referências
Harvard Business Review - Research: Investors Reward Companies That Talk Up Their Digital Initiatives
https://hbr.org/2019/06/research-investors-reward-companies-that-talk-up-their-digital-initiatives
Kafka Summit: Connecting kafka to cash
https://www.confluent.io/kafka-summit-lon19/connecting-kafka-to-cash-ckc
World Economic Forum - Digital Transformation Initiative: Maximizing the Return on Digital Investments
http://www3.weforum.org/docs/DTI_Maximizing_Return_Digital_WP.pdf
E-book: I love logs: Event Data, Stream Processing, and Data Integration by Jay Kreps, CEO of Confluent
https://www.confluent.io/ebook/i-heart-logs-event-data-stream-processing-and-data-integration/
Business Value of Log Analysis
https://devops.com/business-value-of-log-analysis/
Guide to Computer Security Log Management - National Institute of Standards and Technology
https://nvlpubs.nist.gov/nistpubs/Legacy/SP/nistspecialpublication800-92.pdf
Harvard Business Review - Digital Transformation Is Not About Technology
https://hbr.org/2019/03/digital-transformation-is-not-about-technology
Lei número 13.853 - LGPD
http://www.planalto.gov.br/ccivil_03/_ato2015-2018/2018/lei/L13709.htm
A ​Techrom​ é uma startup com foco em data streaming baseada na tecnologia Apache Kafka 14

16.
7. Appendix
Exemplos de empresas que estão explorando as oportunidades com base na tecnologia Apache
Kafka .
A tecnologia Apache Kafka permite que as empresas criem uma infraestrutura de tecnologia
resiliente para apoiar as áreas de negócios.
A ​Techrom​ é uma startup com foco em data streaming baseada na tecnologia Apache Kafka 15