Como big data é tratado na Globo.com e as tecnologias usadas.

1. BIG DATA
na globo.com
Diogo Munaro Vieira
A COMPLEXIDADE DE ANALISAR UM GRANDE VOLUME DE DADOS

2. Líderemaudiênciaeumadasprincipais
empresasdetecnologiadoBrasil

3. 86 MILHÕESDE USUÁRIOS ÚNICOS POR MÊS
comScore fev/2018

4. 10milhõesde usuários únicos por dia
2milhõesde conexões simultâneas
4bilhõesde eventos diários
100mil novos conteúdos por mês

5. Como aprendemosos
interesses dos usuários
dado a sua navegação.
desde2012

6. Big Data
é a nossa base

7. Começamos com
nenhuma
experiência em
BigData

8. 2013
antes de ser legal

9. 100%
grátis e melhor

10. T R A B A L H A N D O C O M

11. REC
first love

12. Capturando dados

13. event tracker by globo.com
Recebemosbilhõesde eventos
por dia
PLATAFORMADE
CAPTURA

14. scroll
pageview
videoview
eoutrasDEZENAS
DADOSCAPTURADOS

15. Devices
smartphones
desktops
tvs
tablets
DADOSCAPTURADOS

16. Estruturando dados

17. Tratamentodos
dados

18. anonimizado
Disponibilização
dosdados
Terceiros
Próprios

19. Armazenando dados

20. ALTA
DISPONIBILIDADE
replicado

21. EstruturaHíbrida

22. PROCESSAMENTO
DETAREFAS

23. Entendendo o conteúdo

24. WEBSEMÂNTICA
ONTOLOGIAS
FEITAS EM CASA
COBERTURA
NOS PRODUTOS
MANUALMENTE
INFORMADA

25. DADOS
6milhõesdeentidades
300classes na ontologia
55milhõesdetriplas
96%dasmatériasanotadas

26. MLENTITY EXTRACTION
CORPUSBASE
MUITO GRANDE
APRENDER
QUAL SERIA A ANOTAÇÃO
SIMPLIFICARA
CLASSIFICAÇÃO
ANOTADORCOMML

27. featured extraction
Conhecendo o usuário

28. ENTIDADES
NOMEADAS
INTERESSESPOR
CLASSE
SPREADING
ACTIVATION
EXCELSIOR

29. SPREADINGACTIVATION

30. USER
CENTRIC
INTERESSESDE
LONGO PRAZO
AGREGAR DADOS
DE PERFIL
PUBLICIDADE
SEGMENTADA

31. Orientado a dados

32. ABteste
METRIFICANDO
O IMPACTO
CTRCOMO
PRINCIPAL META
CULTURADE
DADOS

33. MAB
ML PARA AB
RLVOLTADO PARA
EXPERIENCIA
MINIMIZAA
EXBIÇÃO DA PIOR
EMPODERAMENTO
DO EDITOR

34. QueméDíaz-Canel,indicadoparasucederRaúlCastroemCuba?
IndicadoparasucederRaúlCastronasceuapósaRevoluçãoCubana
https://g1.globo.com/mundo/noticia/quem-e-miguel-diaz-canel-o-discipulo-predileto-de-raul-castro-que-assume-o-poder-em-cuba.ghtml
TÍTULO1
TÍTULO2
TÍTULO1 >15%

35. Para ter a sua cara

36. Milhões
de usuários
Milhares
de conteúdos
interesses
padrões
segmentos
termos
audiência
história

37. FEED
M I X D E A L G O R I T M O S

38. 100algoritmos
SUPERVISED
UNSUPERVISED
REINFORCEMENT

39. Focado no seu produto

40. Growth: evolução
dos produtos

41. RESUMO
• Captura dados de usuário
• Integração com dados terceiros e organização de dados
• Cuidados com segurança e disponibilidade dos dados
• Extrair conhecimento dos dados
• Enriquecer perfil de usuário
• Empresa sempre data driven
• Entregar o melhor conteúdo para nossos usuários
• Fazer o produto crescer

42. Obrigado
https://br.linkedin.com/in/dmvieira

43. talentos.globo.com