pen4education
Inserindo Métricas no Processo
de Design de Produto Digital
Willian Sertório
Gerente de Produto @AIDAX
REDESIGN NÃO SOLICITADO
2011
(No meu redesign) assumo que o
Times deveria bancar as
pessoas que querem ler as colunas
populares e artigos de opinião. As
notícias serão acessadas
por assinatura, assim podemos
eliminar a publicidade das páginas.
866x
"É um redesign que contém boas
ideias e é executado
profissionalmente. Mas o argumento
de que o autor faz não é tão
persuasivo, principalmente porque
faz suposições precipitadas, foge da
realidade e, talvez o pior de tudo,
tem uma abordagem um pouco
ácida em criticar as muitas pessoas
que trabalham no site original."
Khoi Vinh
Ex-Diretor de Design do NYT
"(Redesigns não solicitados) têm
contexto zero para os objetivos de
negócio, necessidades do usuário e
plano estratégico."
Josh Brewer
Ex-Principal Designer no Twitter
...
Quanto do meu trabalho
já não fugiu da
realidade, e não tinha
contexto?
Quanto do meu trabalho
já não fugiu da
realidade, e não tinha
contexto?
R: Muito.
M É T R I C A S
Visão Holística
Menos hipopótamos
Menos hipopótamos
H.I.P.P.O
Highest Paid Person's Opinion
H.I.P.P.O
Highest Paid Person's Opinion
Crescer na carreira
Mas antes, três cuidados.
ENTENDA SEU CONTEXTO
Agência
ProdutoraAgência
Portal de conteúdoProdutoraAgência
Portal de conteúdoProdutoraAgência
Produto Digital
Portal de conteúdoProdutoraAgência
Produto Digital E-commerce
Portal de conteúdoProdutoraAgência
Produto Digital E-commerce Consultoria
ACESSO
AUTONOMIA
Agência
Portal de conteúdo
Produtora
Consultoria
E-commerce
Produto Digital
Números que fazem você se
sentir bem, mas não revelam o
que fazer em seguida.
Métricas de vaidade
Exemplo: Número de downloads, curtidas na fanpage, número
de seguidores, pageviews
Ocorre quando queremos
analisar todas as opções
profundamente, adiando a
tomada de decisão.
Dica: Foque em poucas
métricas.
Paralisia de Análise
O que é uma boa métrica?
O que é uma boa métrica?
Ben Yoskovitz,
Lean Analytics
1. É uma taxa, ou uma razão.
2. É comparativa.
3. É simples de entender.
Quilômetros por hora
É uma razão (espaço/tempo) ✔
É comparativa ✔
É simples de entender ✔
Quais são as principais métricas
para produtos digitais?
Startup Metrics for Pirates
(AARRR)
Dave Mclure,
500 Startups
Aquisição
Ativação
Retenção
Referência
Receita
Visitantes únicos, CPC
Leads, cadastros, CAC
DAU, WAU, MAU, Churn
MGM, NPS, Coeficiente viral
LTV, MRR, Ticket Médio
Startup Metrics for Pirates
(AARRR)
Dave Mclure,
500 Startups
Aquisição
Ativação
Retenção
Referência
Receita
Visitantes únicos, CPC
Leads, cadastros, CAC
DAU, WAU, MAU, Churn
MGM, NPS, Coeficiente viral
LTV, MRR, Ticket Médio
Startup Metrics for Pirates
(AARRR)
Dave Mclure,
500 Startups
Aquisição
Ativação
Retenção
Referência
Receita
Visitantes únicos, CPC
Leads, cadastros, CAC
DAU, WAU, MAU, Churn
MGM, NPS, Coeficiente viral
LTV, MRR, Ticket Médio
Startup Metrics for Pirates
(AARRR)
Dave Mclure,
500 Startups
Aquisição
Ativação
Retenção
Referência
Receita
Visitantes únicos, CPC
Leads, cadastros, CAC
DAU, WAU, MAU, Churn
MGM, NPS, Coeficiente viral
LTV, MRR, Ticket Médio
Startup Metrics for Pirates
(AARRR)
Dave Mclure,
500 Startups
Aquisição
Ativação
Retenção
Referência
Receita
Visitantes únicos, CPC
Leads, cadastros, CAC
DAU, WAU, MAU, Churn
MGM, Coeficiente viral
LTV, MRR, Ticket Médio
Startup Metrics for Pirates
(AARRR)
Dave Mclure,
500 Startups
Aquisição
Ativação
Retenção
Referência
Receita
Visitantes únicos, CPC
Leads, cadastros, CAC
DAU, WAU, MAU, Churn
MGM, Coeficiente viral
LTV, MRR, GM, Ticket Médio
CAC
Custo de aquisição de cliente.
Custo de vendas e marketing
Número de novos clientes
CAC =
Exemplo: CAC do Netflix foi de US$18,03 em 2010.
Startup Metrics for Pirates
(AARRR)
Dave Mclure,
500 Startups
Aquisição
Ativação
Retenção
Referência
Receita
Visitantes únicos, CPC
Leads, cadastros, CAC
DAU, WAU, MAU, Churn
MGM, Coeficiente viral
LTV, MRR, GM, Ticket Médio
Querem saber as outras
fórmulas? Pergunte no
final da apresentação.
:)
Ué, e a conversão?
Dave Mclure,
500 Startups
Aquisição
Ativação
Retenção
Referência
Receita
5 PASSOS PARA
TRABALHAR COM
MÉTRICAS
NO DIA A DIA
MATERIAIS NECESSARIOSMateriais Necessários
Como trabalhar com métricas no dia-a-dia
Defina um
objetivo
Melhorar ativação.
Melhorar a ativação em 20% dentro
de uma semana.
Como trabalhar com métricas no dia-a-dia
Escreva sua
hipótese
Defina um
objetivo
Modelo de hipótese:
(experimento) vai (métrica) em (tempo).
Exemplo de hipótese:
Posicionar o produto como uma solução de retenção para e-commerce
na landing page vai gerar o dobro de leads
em uma semana.
Como trabalhar com métricas no dia-a-dia
Escreva sua
hipótese
Defina um
objetivo
Construa seu
experimento
Como trabalhar com métricas no dia-a-dia
Escreva sua
hipótese
Defina um
objetivo
Construa seu
experimento
Documente o
aprendizado
Documente resultados e aprendizado:
93 acessos, 23 leads = 24.7% de conversão. CPA de R$8.69. Resultado
5x melhor.
Parece que estamos mais próximos de um problema-público
sustentável.
Como trabalhar com métricas no dia-a-dia
Escreva sua
hipótese
Defina um
objetivo
Construa seu
experimento
Documente o
aprendizado
Defina os
próximos
passos
Defina os próximos passos:
1) Conseguimos validar a hipótese?
2) O que é preciso aprender agora?
3) Precisamos de informações qualitativas antes de continuar?
Como trabalhar com métricas no dia-a-dia
Escreva sua
hipótese
Defina um
objetivo
Construa seu
experimento
Documente o
aprendizado
Defina os
próximos
passos
“Números sozinhos não vão te dar as
respostas. Você também deve pensar
criticamente nas características
qualitativas do seu negócio.”
Peter Thiel - Paypal
Métricas são uma ferramenta.
Métricas são o meio, e não o fim.
Produtos que criem valor.
Negócios que sejam sustentáveis.
Download da apresentação
http://goo.gl/2N8iBY
Planilha de experimentos
http://goo.gl/YMqOb2
Leitura recomendada
Fórmulas
Principais fómulas
David Skok,
Matrix Partners
Aquisição
Ativação
Retenção
Referência
Receita
Visitantes únicos, CPC
Leads, cadastros, CAC
DAU, WAU, MAU, Churn
MGM, Coeficiente viral
LTV, MRR, GM, Ticket Médio
Andrew Chen,
Uber
CAC
Custo de aquisição de cliente.
Custo de vendas e marketing
Número de novos clientes
CAC =
Exemplo: CAC do Netflix foi de US$18,03 em 2010.
Churn
Taxa de desistência dos clientes.
Dos usuários cadastrados no começo do
período, quantos se pararam de pagar
até o final do período?
Exemplo: Churn do Netflix foi de 69.77% em 2010.
Gross Margin
Margem Bruta. O quão rentável é seu produto.
Exemplo: GM do Netflix foi de 37.24% em 2010.
Receita
Lucro
GM = * 100
Gross Margin
Margem Bruta. O quão rentável é seu produto.
Exemplo: GM do Netflix foi de 37.24% em 2010.
Receita
Lucro
GM = * 100
GM =
+65%
Monthly Recurring Revenue
Receita recorrente mensal.
Pode ser calculada como um todo, ou
por usuário (Average Revenue per
Account).
Exemplo: MRR do Netflix foi de $180,218.75 em 2010.
ARPA de US$12.09.
Lifetime Value
Valor do contrato de cada cliente.
(ARPA*12) * GM
Churn anual
LTV =
Exemplo: LTV do Netflix foi de US$78,07 em 2010.
Lifetime Value
Valor do contrato de cada cliente.
Exemplo: LTV do Netflix foi de US$78,07 em 2010.
LTV:CAC ratio do Netflix = 4.33x
LTV =
3x CAC
(ARPA*12) * GM
Churn anual
LTV =
Daily / Weekly / Monthly Active Users
Usuários ativos por período de tempo.
Exemplo: MAU do produto X é de 3%.
Usuários ativos no mês
Total de usuários
MAU = * 100
Coeficiente Viral
O quão viral é o meu produto?
100 total de usuários
1000 convites para novos usuários
30% convertem
300 novos usuários via convite
Novos usuários via convite
Total de usuários
CV =
Coeficiente Viral
O quão viral é o meu produto?
100 total de usuários
1000 convites para novos usuários
30% convertem
300 novos usuários via convite
300
100
CV =
CV > 1
No exemplo, o CV é de 3. O produto é viral.
Vale a pena testar tudo?
TDC2016SP - Trilha UX Design

TDC2016SP - Trilha UX Design

  • 1.
    pen4education Inserindo Métricas noProcesso de Design de Produto Digital Willian Sertório Gerente de Produto @AIDAX
  • 2.
  • 6.
  • 9.
    (No meu redesign)assumo que o Times deveria bancar as pessoas que querem ler as colunas populares e artigos de opinião. As notícias serão acessadas por assinatura, assim podemos eliminar a publicidade das páginas.
  • 10.
  • 11.
    "É um redesignque contém boas ideias e é executado profissionalmente. Mas o argumento de que o autor faz não é tão persuasivo, principalmente porque faz suposições precipitadas, foge da realidade e, talvez o pior de tudo, tem uma abordagem um pouco ácida em criticar as muitas pessoas que trabalham no site original." Khoi Vinh Ex-Diretor de Design do NYT
  • 12.
    "(Redesigns não solicitados)têm contexto zero para os objetivos de negócio, necessidades do usuário e plano estratégico." Josh Brewer Ex-Principal Designer no Twitter
  • 13.
  • 14.
    Quanto do meutrabalho já não fugiu da realidade, e não tinha contexto?
  • 15.
    Quanto do meutrabalho já não fugiu da realidade, e não tinha contexto? R: Muito.
  • 16.
    M É TR I C A S
  • 17.
  • 18.
  • 19.
  • 20.
  • 21.
  • 22.
  • 23.
  • 24.
  • 25.
  • 26.
  • 27.
  • 28.
  • 29.
  • 30.
    Portal de conteúdoProdutoraAgência ProdutoDigital E-commerce Consultoria
  • 31.
  • 32.
    Números que fazemvocê se sentir bem, mas não revelam o que fazer em seguida. Métricas de vaidade Exemplo: Número de downloads, curtidas na fanpage, número de seguidores, pageviews
  • 34.
    Ocorre quando queremos analisartodas as opções profundamente, adiando a tomada de decisão. Dica: Foque em poucas métricas. Paralisia de Análise
  • 35.
    O que éuma boa métrica?
  • 36.
    O que éuma boa métrica? Ben Yoskovitz, Lean Analytics 1. É uma taxa, ou uma razão. 2. É comparativa. 3. É simples de entender.
  • 37.
    Quilômetros por hora Éuma razão (espaço/tempo) ✔ É comparativa ✔ É simples de entender ✔
  • 38.
    Quais são asprincipais métricas para produtos digitais?
  • 39.
    Startup Metrics forPirates (AARRR) Dave Mclure, 500 Startups Aquisição Ativação Retenção Referência Receita Visitantes únicos, CPC Leads, cadastros, CAC DAU, WAU, MAU, Churn MGM, NPS, Coeficiente viral LTV, MRR, Ticket Médio
  • 40.
    Startup Metrics forPirates (AARRR) Dave Mclure, 500 Startups Aquisição Ativação Retenção Referência Receita Visitantes únicos, CPC Leads, cadastros, CAC DAU, WAU, MAU, Churn MGM, NPS, Coeficiente viral LTV, MRR, Ticket Médio
  • 41.
    Startup Metrics forPirates (AARRR) Dave Mclure, 500 Startups Aquisição Ativação Retenção Referência Receita Visitantes únicos, CPC Leads, cadastros, CAC DAU, WAU, MAU, Churn MGM, NPS, Coeficiente viral LTV, MRR, Ticket Médio
  • 42.
    Startup Metrics forPirates (AARRR) Dave Mclure, 500 Startups Aquisição Ativação Retenção Referência Receita Visitantes únicos, CPC Leads, cadastros, CAC DAU, WAU, MAU, Churn MGM, NPS, Coeficiente viral LTV, MRR, Ticket Médio
  • 43.
    Startup Metrics forPirates (AARRR) Dave Mclure, 500 Startups Aquisição Ativação Retenção Referência Receita Visitantes únicos, CPC Leads, cadastros, CAC DAU, WAU, MAU, Churn MGM, Coeficiente viral LTV, MRR, Ticket Médio
  • 44.
    Startup Metrics forPirates (AARRR) Dave Mclure, 500 Startups Aquisição Ativação Retenção Referência Receita Visitantes únicos, CPC Leads, cadastros, CAC DAU, WAU, MAU, Churn MGM, Coeficiente viral LTV, MRR, GM, Ticket Médio
  • 45.
    CAC Custo de aquisiçãode cliente. Custo de vendas e marketing Número de novos clientes CAC = Exemplo: CAC do Netflix foi de US$18,03 em 2010.
  • 46.
    Startup Metrics forPirates (AARRR) Dave Mclure, 500 Startups Aquisição Ativação Retenção Referência Receita Visitantes únicos, CPC Leads, cadastros, CAC DAU, WAU, MAU, Churn MGM, Coeficiente viral LTV, MRR, GM, Ticket Médio Querem saber as outras fórmulas? Pergunte no final da apresentação. :)
  • 47.
    Ué, e aconversão? Dave Mclure, 500 Startups Aquisição Ativação Retenção Referência Receita
  • 48.
    5 PASSOS PARA TRABALHARCOM MÉTRICAS NO DIA A DIA
  • 49.
  • 51.
    Como trabalhar commétricas no dia-a-dia Defina um objetivo
  • 52.
    Melhorar ativação. Melhorar aativação em 20% dentro de uma semana.
  • 53.
    Como trabalhar commétricas no dia-a-dia Escreva sua hipótese Defina um objetivo
  • 54.
    Modelo de hipótese: (experimento)vai (métrica) em (tempo).
  • 55.
    Exemplo de hipótese: Posicionaro produto como uma solução de retenção para e-commerce na landing page vai gerar o dobro de leads em uma semana.
  • 56.
    Como trabalhar commétricas no dia-a-dia Escreva sua hipótese Defina um objetivo Construa seu experimento
  • 58.
    Como trabalhar commétricas no dia-a-dia Escreva sua hipótese Defina um objetivo Construa seu experimento Documente o aprendizado
  • 59.
    Documente resultados eaprendizado: 93 acessos, 23 leads = 24.7% de conversão. CPA de R$8.69. Resultado 5x melhor. Parece que estamos mais próximos de um problema-público sustentável.
  • 60.
    Como trabalhar commétricas no dia-a-dia Escreva sua hipótese Defina um objetivo Construa seu experimento Documente o aprendizado Defina os próximos passos
  • 61.
    Defina os próximospassos: 1) Conseguimos validar a hipótese? 2) O que é preciso aprender agora? 3) Precisamos de informações qualitativas antes de continuar?
  • 62.
    Como trabalhar commétricas no dia-a-dia Escreva sua hipótese Defina um objetivo Construa seu experimento Documente o aprendizado Defina os próximos passos
  • 63.
    “Números sozinhos nãovão te dar as respostas. Você também deve pensar criticamente nas características qualitativas do seu negócio.” Peter Thiel - Paypal
  • 64.
    Métricas são umaferramenta. Métricas são o meio, e não o fim.
  • 65.
    Produtos que criemvalor. Negócios que sejam sustentáveis.
  • 66.
  • 67.
  • 68.
  • 69.
    Principais fómulas David Skok, MatrixPartners Aquisição Ativação Retenção Referência Receita Visitantes únicos, CPC Leads, cadastros, CAC DAU, WAU, MAU, Churn MGM, Coeficiente viral LTV, MRR, GM, Ticket Médio Andrew Chen, Uber
  • 70.
    CAC Custo de aquisiçãode cliente. Custo de vendas e marketing Número de novos clientes CAC = Exemplo: CAC do Netflix foi de US$18,03 em 2010.
  • 71.
    Churn Taxa de desistênciados clientes. Dos usuários cadastrados no começo do período, quantos se pararam de pagar até o final do período? Exemplo: Churn do Netflix foi de 69.77% em 2010.
  • 72.
    Gross Margin Margem Bruta.O quão rentável é seu produto. Exemplo: GM do Netflix foi de 37.24% em 2010. Receita Lucro GM = * 100
  • 73.
    Gross Margin Margem Bruta.O quão rentável é seu produto. Exemplo: GM do Netflix foi de 37.24% em 2010. Receita Lucro GM = * 100 GM = +65%
  • 74.
    Monthly Recurring Revenue Receitarecorrente mensal. Pode ser calculada como um todo, ou por usuário (Average Revenue per Account). Exemplo: MRR do Netflix foi de $180,218.75 em 2010. ARPA de US$12.09.
  • 75.
    Lifetime Value Valor docontrato de cada cliente. (ARPA*12) * GM Churn anual LTV = Exemplo: LTV do Netflix foi de US$78,07 em 2010.
  • 76.
    Lifetime Value Valor docontrato de cada cliente. Exemplo: LTV do Netflix foi de US$78,07 em 2010. LTV:CAC ratio do Netflix = 4.33x LTV = 3x CAC (ARPA*12) * GM Churn anual LTV =
  • 77.
    Daily / Weekly/ Monthly Active Users Usuários ativos por período de tempo. Exemplo: MAU do produto X é de 3%. Usuários ativos no mês Total de usuários MAU = * 100
  • 78.
    Coeficiente Viral O quãoviral é o meu produto? 100 total de usuários 1000 convites para novos usuários 30% convertem 300 novos usuários via convite Novos usuários via convite Total de usuários CV =
  • 79.
    Coeficiente Viral O quãoviral é o meu produto? 100 total de usuários 1000 convites para novos usuários 30% convertem 300 novos usuários via convite 300 100 CV = CV > 1 No exemplo, o CV é de 3. O produto é viral.
  • 80.
    Vale a penatestar tudo?