Este documento discute como a tecnologia Kafka rodando no Google Cloud pode agregar valor para negócios de marketplace online, permitindo a integração de sistemas, processamento de dados em tempo real e transformação e enriquecimento de dados.

1. MARKETPLACE ONLINE
E TECNOLOGIA KAFKA
VIA GOOGLE CLOUD
A SINTONIA PERFEITA PARA O NEGÓCIO

2. Fator íntimo
Entre as várias tendências que poderão emergir pós-COVID-19, o marketplace online
tende a ser uma aposta mais concreta principalmente no mercado brasileiro.
A pesquisa feita no Brasil no início deste ano pela empresa Enext, do grupo WPP, identi-
ficou que 45% das empresas entrevistadas não vendiam seus produtos em marke-
tplaces online, mostrando um grande potencial de mercado.
Globalmente, de acordo com a empresa Digital Commerce 360, o marketplace online
movimentou em 2019 US$ 2.3 trilhões, com a taxa de crescimento de 22% comparado
com o ano anterior.
O elo entre o marketplace online e a tecnologia Kafka rodando
através do Google Cloud permite explorar todo o potencial do
ecossistema para alavancar as vendas e reduzir custos.

3. Embora o marketplace tenha crescido no segmento B2C, no segmento B2B pode
também proporcionar oportunidades, uma vez que os compradores terão uma gama
de opções de produtos e preços e os vendedores terão acesso a uma grande quanti-
dade de compradores, que poderá aumentar a receita sem a necessidade de recursos
em marketing ou time dedicado de vendas (dependendo do marketplace).
Um exemplo de marketplace online B2B no Brasil é a Orbia voltado para o agronegócio
lançado em 2019. Em 90 dias de operação, 140 mil produtores rurais realizaram o ca-
dastro na plataforma.
Entretanto, o marketplace online exige atenção nos seguintes pontos:
Inventário integrado com atualização em tempo real:
A empresa deve se preparar para ter o processo logístico conectado com o sistema
do marketplace, além de obter o controle do inventário com as métricas atualizadas
em tempo real e não ter problemas com a entrega.
Processamento de pagamento online:
É importante que a empresa que pretenda participar de marketplace online crie uma
estrutura de pagamento digital para facilitar a transação e eliminar barreiras.
Monitoramento e Compliance:
É imprescindível ter o processo de monitoramento das transações e negociações
realizadas no sistema para efeito de compliance. Neste sentido, a empresa deverá
gerenciar o histórico (log’s) para efeito de auditoria como também a segurança dos
dados.
O que a tecnologia Kafka, usando a infraestrutura do do Google Cloud, pode
contribuir com o ecossistema do marketplace online?
Este documento mostrará 5 pontos que a tecnologia poderá agregar valor para
o negócio.

4. 1 - INTEGRAÇÃO E FOCO NO EVENTO
A integração da cadeia do marketplace é um desafio enorme, uma vez que
cada empresa tem seu legado e não tem um mecanismo de interconexão
(Ex.: API) para a troca de informações.
A tecnologia Kafka possui uma gama de conectores que simplifica e agiliza
a conexão entre sistemas reduzindo o tempo de implantação e, em alguns
casos, o custo.
Outra vantagem que a tecnologia proporciona é a atuação com base em
eventos (Event-Driven), pois age de forma pró-ativa em relação as requisi-
ções. Em outras palavras, enquanto a API aguarda ser requisitada de acordo
com a solicitação, o Kafka tem mecanismos para entender o contexto e
disparar ações (eventos) para outros sistemas.
Exemplificando: Se o usuário realiza uma compra, a tecnologia já dispara
eventos para os sistemas diretamente envolvidos (financeiro, logística, esto-
que, etc.) como também para os indiretamente envolvidos (se comprou tal
produto, pode ser que se interesse por outro produto complementar).
USER
DATA
EXISTING APPS
RDBMS TNX LOG
KAFKA
CONNECT

5. 2 - AÇÃO EM TEMPO REAL
A tecnologia Kafka com o Google BigQuery possibilita o pro-
cessamento de dados com baixa latência ou em streaming que
ajuda na atualização rápida do inventário, acompanhamento das
transações em tempo real e na identificação de fraudes.
Algumas empresas como Walmart e Target têm usado a tecno-
logia para realizar a gestão do inventário, resultando na eficiên-
cia logística e no custo da operação.
Por padrão, o Kafka trabalha com o processamento de dados
contínuo e instantâneo (Streaming) diferentemente do proces-
samento em fila e acumulado (Batch) tornando a tecnologia
eficaz.
Em um cenário em que é preciso acompanhar todo o ecossis-
tema em tempo real, o Kafka é um aliado importante para o
marketplace online.

6. 3 - TRANSFORMAÇÃO E ENRIQUECIMENTO
DOS DADOS
Conforme as interações forem ocorrendo, a empresa poderá usar o
recurso do Kafka para realizar transformações de dados, assim como
enriquecimento da base de dados para melhorar a oferta, o mix de pro-
dutos, probabilidades de preço x demanda via Google TensorFlow,
entre outras possibilidades.
Em algumas empresas que precisam manipular várias tabelas de dados
para obter informações sobre o histórico de vendas ou de compras em
um determinado período, podem-se consumir horas ou dias para obter
as informações com risco de falhas. Com o Kafka, é possível unificar
várias tabelas em segundos de maneira automatizada e criar insights
relevantes para a tomada de decisão sem contar o aumento de produ-
tividade do time e, dependendo do cenário, redução do custo ou incre-
mento de vendas.
Em ambiente de marketplace online, é fundamental ter as informações
com rapidez e precisão para tomar ações ágeis.
O recurso KSQL é desenvolvido pela empresa Confluent.
GCP’s architecture for Stream Analytics

7. 4 - SEGURANÇA DOS DADOS
A tecnologia Kafka permite o uso de recursos de criptografia de
dados, autenticação e permissão dos acessos dos usuários ao siste-
ma.
Além disso, é possível rastrear todas as evidências das transações
realizadas através dos logs para efeito de auditoria e compliance.
Vale ressaltar que o fato da tecnologia processar os dados em strea-
ming, faz com que possa identificar anomalias em tempo real para
tomar ações rápidas, reduzindo o risco de operações suspeitas.
A Confluent, empresa criadora da tecnologia Kafka, fornece todos os
recursos de segurança necessários para o ecossistema.
METADATA SERVICE (MDS)
CLUSTER
SCHEMA REGISTRY
KAFKA
CLIENTES
SECURITY
PLUGIN
AVRO
SERDES
AUTHENTICATE / GET TOKEN
SSL / SASL
SSL/BASIC AUTH
SASL PLAINTEXT
REST PROXY
REST CLIENT
1
2
3

8. 5 - OPERAÇÃO DE CLOUD
O Kafka poder ser utilizado tanto no ambiente em cloud como
também no ambiente local (On-Premises).
Com isso, é possível criar uma ponte inteligente entre os dois
ambientes, otimizando os recursos e acelerando o processo de
validações e consultas com o menor tempo possível.
A parceria entre o Google e a empresa Confluent, criadora da
tecnologia Kafka, permite o uso da tecnologia de forma geren-
ciada que abstrai toda a preocupação com a infraestrutura do
ambiente deixando o time técnico focado no negócio.
Outro ponto é a possibilidade de mover dados do datacenter
local para o Google Cloud através do recurso Replicator.
Exemplificando: Realização de uma transação no marketplace
online com verificação do histórico de compra de um determi-
nado cliente cuja base de dados esteja no servidor local
(On-Premises).
Apache Kafka as a Service for Google Cloud
+ =
=

9. CENÁRIO PROMISSOR NO B2B
Na previsão da consultoria americana Gartner, pelo menos 70% das
transações dos Enterprise Marketplaces ocorrerão no B2B até 2023.
O Enterprise Marketplace é uma subcategoria do Marketplace online.
Exemplo de empresas que atuam no Enterprise Marketplace são a
Alston, Bayer, Walmart entre outras.
Para as empresas que pretendem criar um enterprise marketplace,
alguns pontos importantes a serem considerados:
Na visão da empresa de pesquisa Altimeter Group, a evolução do
marketplace online será um centro de experiência para compradores e
vendedores uma vez que o ecossistema poderá proporcionar conveni-
ência, gama de opções, simplicidade e integração.
Tecnologia Robusta: Dada a complexidade da gestão do ecossistema
de marketplace, a empresa precisará usar tecnologias robustas para
suportar o ambiente. Outra possibilidade é utilizar plataformas de
marketplace disponíveis no mercado;
Processo operacional: É importante definir todos os processos
envolvidos neste ambiente (pagamento, entrega, etc);
Comunicação: Desenvolver uma comunicação simples e intuitiva da
plataforma, assim como vídeos educativos para ajudar na utilização do
sistema. Vale também o cuidado com a usabilidade (UX) da ferramenta.

10. CENÁRIO PROMISSOR NO B2B
MODELO DE ENTERPRISE MARKETPLACE ONLINE DE CONSULTORIA GARTNER
ONLINE MARKERPLACES
ENTERPRISE
COSTUMERS
SELLER
Tradicional Commerce Model
ENTERPRISE
ENTERPRISE
OPERATOR
SELLERS
ONLINE MARKETPLACE MODEL

11. REFERÊNCIAS
How SARS Led to the Birth of China E-Commerce:
https://jingdaily.com/how-sars-led-to-the-birthof-china-e-commerce/
Marketplaces Online Brasileiros:
http://www.enext.com.br/pesquisa/
What are the top online marketplaces?:
https://www.digitalcommerce360.com/article/infographic-top-online-marketplaces/
10 technology trends to watch in the COVID-19 pandemic:
https://www.weforum.org/agenda/2020/04/10-technology-trends-
-coronavirus-covid19-pandemic-robotics-telehealth/
How B2B online marketplaces could transform indirect procurement:
https://www.mckinsey.com/business-functions/operations/our-in-
sights/how-b2b-online-marketplaces-could-transform-indirect-procurement

12. A TIGABYTES SOMOS NUVENS É UM DOS MAIORES PARCEIROS
GOOGLE NA AMÉRICA LATINA E CONTA COM UM TIME ALTAMENTE
ESPECIALIZADO E CERTIFICADO.
BOA JORNADA NA NUVEM!
WWW.TIGABYTES.COM.BR