Questionários e entrevistas

1. Testes de Usabilidade / Marcello Cardoso
Perguntando aos usuários:
Questionários e entrevistas
Teste e Qualidade de Software
Teste de Usabilidade
Marcello de Campos Cardoso | www.mcardoso.com.br | mcardoso@gmail.com
Friday, March 2, 12

2. Testes de Usabilidade / Marcello Cardoso
Plano de curso
1ª Apresentação da disciplina e introdução à Testes de Usabilidade -
2ª Metas e princípios de design - Avaliação estratégica 10pts
3ª Perguntando aos usuários: Questionários e entrevistas 15pts
4ª Perguntando a especialistas: As 10 heurísticas de Nielsen 15pts
5ª Avaliando tarefas do sistema com Percurso Cognitivo (PC) 15pts
6ª Método de Inspeção Semiótica (MIS) 15pts
7ª Observando a experiência: Testes de usabilidade (roteiro) 15pts
8ª Observando a experiência: Testes de usabilidade (aplicação) 15pts
Friday, March 2, 12

3. Testes de Usabilidade / Marcello Cardoso
recapitulando..
Friday, March 2, 12

4. Testes de Usabilidade / Marcello Cardoso
Usabilidade é objetivo
...é atributo que define a facilidade de uso
Design de interação é metodologia
...métodos e técnicas para criar produtos mais usáveis
Design Centrado no Usuário é abordagem
...é aplicar técnicas envolvendo o usuário
Friday, March 2, 12

5. Testes de Usabilidade / Marcello Cardoso
Metas de Usabilidade
1. Utilidade
2. Eficácia
3. Eficiência
4. Segurança
5. Facilidade de aprendizado
6. Facilidade de lembrar como se usa
Friday, March 2, 12

6. Testes de Usabilidade / Marcello Cardoso
Questionários Percurso
e
rking entrevistas Cognitivo
chma Card Sorting
Ben
to
jam isa
to
en
o
ne qu
çã
en
lvim
lida
pla pes
vo
sen
va
de
Stor rototipação
p urística
map y lise He
ping Aná
personas
Friday, March 2, 12

7. Testes de Usabilidade / Marcello Cardoso
Ciclo de vida do produto
isa nto
qu me
s a
pe nej
pla
Validar e descobrir novas
DEMANDAS
Friday, March 2, 12

8. Testes de Usabilidade / Marcello Cardoso
Pesquisa é minerar dados
e colher informações.
Friday, March 2, 12

9. Testes de Usabilidade / Marcello Cardoso
( Dados vs. Informações
)
Friday, March 2, 12

10. Testes de Usabilidade / Marcello Cardoso
( “Possuímos 6 mil cadastros femininos.”
Isso é um dado. )
Friday, March 2, 12

11. Testes de Usabilidade / Marcello Cardoso
( 6 mil fem / 3 mil masc = 2/3 fem
Isso é um informação.
)
Friday, March 2, 12

12. Testes de Usabilidade / Marcello Cardoso
( Informação são
dados tratados. )
Friday, March 2, 12

13. Testes de Usabilidade / Marcello Cardoso
Informações
Ajudam a evitar problemas
clássicos de escopo de projeto
Friday, March 2, 12

14. Testes de Usabilidade / Marcello Cardoso
Não há receita de bolo, mas princípios.
1. Desenvolvedor ≠ usuário
2. Dados ≠ informações
3. Mais informação = menor chance de insucesso
4. Arquétipo ≠ clichê
Friday, March 2, 12

15. Testes de Usabilidade / Marcello Cardoso
O usuário elástico
“Quem vai usar isso? - Todo Mundo!”
usuário avançado / usuário iniciante ≠ usuário real
Friday, March 2, 12

16. Testes de Usabilidade / Marcello Cardoso
Design auto-referenciado
FUBU/FYBM
Friday, March 2, 12

17. Testes de Usabilidade / Marcello Cardoso
( FUBU
=
for us by us )
Friday, March 2, 12

18. Testes de Usabilidade / Marcello Cardoso
Casos extremos
Feature creep, feature bloat ou featuritis.
É o excesso de ferramenta.
Pajé demais pra pouco índio.
Remédio: Story Mapping!
Friday, March 2, 12

19. Testes de Usabilidade / Marcello Cardoso
Para evitar
dor de cabeça..
isa nto
qu me
s a
pe nej
pla
Friday, March 2, 12

20. Testes de Usabilidade / Marcello Cardoso
Algumas técnicas de pesquisa:
‣ Avaliação do SAC, feedback,
‣ Análise métrica,
‣ Benchmarking,
‣ Etnografia online,
‣ Entrevistas,
‣ Questionários,
‣ etc...
Friday, March 2, 12

21. Testes de Usabilidade / Marcello Cardoso
Friday, March 2, 12

22. Testes de Usabilidade / Marcello Cardoso
Friday, March 2, 12

23. Testes de Usabilidade / Marcello Cardoso
Friday, March 2, 12

24. Testes de Usabilidade / Marcello Cardoso
Friday, March 2, 12

25. Testes de Usabilidade / Marcello Cardoso
Etnografia online + personas
Persona: Otávio Luiz
• 23 anos;
• Cursa Engenharia;
• Eco turista;
• Envia vídeos para o YT.
Otávio Luiz, de 23 anos, graduando em Engenharia.
Mora com os pais e possui um computador em seu quarto. Aproveita seus feriados realizando pequenas
viagens ao interior para andar de bicicleta com amigos, quase sempre registrando o passeio em sua
máquina digital.
Gosta de compartilhar seus vídeos em um fórum de interessados em eco-turismo, portanto é
usuário colaborador do YouTube.
Friday, March 2, 12

26. Entrevistas
Testes de Usabilidade / Marcello Cardoso
explorando a campo
Friday, March 2, 12

27. Testes de Usabilidade / Marcello Cardoso
Entrevistas
explorando a campo
Podem ser pensadas como
uma conversação com um propósito.
(Kahn e Cannel, “The dynamics of interviewing”, 1957)
Friday, March 2, 12

28. Testes de Usabilidade / Marcello Cardoso
Entrevistas explorando a campo
Dividem em 4 tipos
1. Não estruturadas (open ended. escopo aberto)
2. Estruturadas (escopo fechado)
3. Semi-estruturadas (adaptáveis)
4. Focus group - (Conduzida por tópicos)
quanto
+ exploratórias,
+ aberto o escopo
Friday, March 2, 12

29. Testes de Usabilidade / Marcello Cardoso
Entrevistas explorando a campo
Regrinhas de ouro - antes
1. Elabore um roteiro
2. Prepare um termo de confidencialidade e consentimento
3. Certifique se tudo está impresso antes de começar
4. Verifique e teste equipamento de gravação
(Robson, “Real World Research”, 1993)
Friday, March 2, 12

30. Testes de Usabilidade / Marcello Cardoso
Entrevistas explorando a campo
Teste piloto - antes
Realize a entrevista para validar perguntas, estrutura, tempo.
Adapte e refaça o teste piloto se necessário.
Friday, March 2, 12

31. Testes de Usabilidade / Marcello Cardoso
Entrevistas explorando a campo
Regrinhas de ouro - durante
1. SIGA o roteiro!
2. Vista e comporte +/- como o entrevistado
3. Apresente-se cordialmente
4. Explique o objetivo da pesquisa
5. Peça que assine os termos (confidencialidade e consentimento)
continua... >
Friday, March 2, 12

32. Testes de Usabilidade / Marcello Cardoso
Entrevistas explorando a campo
Regrinhas de ouro - durante
6. Avise então que começará a gravar
7. Informe que o participante pode desistir a qualquer
momento
8. Inicie a gravação.
Friday, March 2, 12

33. Testes de Usabilidade / Marcello Cardoso
Entrevistas explorando a campo
Regrinhas de ouro - depois
Agradeça ao participante e pergunte se há algo que ele gostaria de acrescentar.
Friday, March 2, 12

34. Testes de Usabilidade / Marcello Cardoso
Chame o entrevistado pelo nome.
E comece por perguntas fáceis, mesmo que
você saiba a resposta.
#1
Friday, March 2, 12

35. Testes de Usabilidade / Marcello Cardoso
Vamos começar? Qual o maior
constrangimento profissional que você já
passou na sua vida?
#1
Friday, March 2, 12

36. Testes de Usabilidade / Marcello Cardoso
Então Camila, você fez
alguma viagem recentemente?
#1
Friday, March 2, 12

37. Testes de Usabilidade / Marcello Cardoso
Evite perguntas longas!
Treine seu poder de síntese e clareza.
#2
Friday, March 2, 12

38. Testes de Usabilidade / Marcello Cardoso
Na atual conjuntura sócio-
econômica e política do Brasil
contemporâneo, qual sua perspectiva acerca da
realidade singular musical do proto-gueto
das comunidades cariocas?
#2
Friday, March 2, 12

39. Testes de Usabilidade / Marcello Cardoso
O que você acha do samba-
de-roda tradicional carioca?
#2
Friday, March 2, 12

40. Testes de Usabilidade / Marcello Cardoso
Evite sentenças compostas
difíceis de entender e de anotar as respostas
#3
Friday, March 2, 12

41. Testes de Usabilidade / Marcello Cardoso
O que você acha deste tipo de
portal de notícias, e comparado a outros
tipos de portais?
#3
Friday, March 2, 12

42. Testes de Usabilidade / Marcello Cardoso
O que você acha deste
portal de notícias?
#3
Friday, March 2, 12

43. Testes de Usabilidade / Marcello Cardoso
E comparado a outros
tipos de portais?
#3
Friday, March 2, 12

44. Testes de Usabilidade / Marcello Cardoso
Evite jargões e termos técnicos
que o entrevistado pode desconhecer e não admitir por
constrangimento
#4
Friday, March 2, 12

45. Testes de Usabilidade / Marcello Cardoso
O que você pensa sobre uma
StartUp realizar Pivot tecnológico antes
do lançamento de seu MVP?
#4
Friday, March 2, 12

46. Testes de Usabilidade / Marcello Cardoso
O que você acha sobre uma
empresa mudar o foco do seu produto
antes de lançá-lo?
#4
Friday, March 2, 12

47. Testes de Usabilidade / Marcello Cardoso
Evite tendenciamento e suposições.
Tenha bom-senso. Busque sempre a neutralidade
em seu tom e suas palavras.
#5
Friday, March 2, 12

48. Testes de Usabilidade / Marcello Cardoso
Quais as coisas que
você mais gosta nessa área do
portal?
#5
Friday, March 2, 12

49. Testes de Usabilidade / Marcello Cardoso
O que você acha desta
área do portal?
#5
Friday, March 2, 12

50. Testes de Usabilidade / Marcello Cardoso
Busque uma consistência narrativa
A ordem das perguntas influencia as respostas
#6
Friday, March 2, 12

51. Testes de Usabilidade / Marcello Cardoso
#6
Qual sua pretenção
salarial para daqui a 2 anos?
8 mil.
Você
fuma!?
Friday, March 2, 12

52. Testes de Usabilidade / Marcello Cardoso
Entrevistas explorando a campo
Entrevistas não ou semi-estruturadas
1. Tenha um objetivo claro, uma agenda
2. Estruture os temas que precisa abordar em tópicos
Friday, March 2, 12

53. Testes de Usabilidade / Marcello Cardoso
Entrevistas explorando a campo
Entrevistas não ou semi-estruturadas
vantagens desvantagens
geram dados ricos exigem mais experiência
levam a descobertas disruptivas levam tempo pra serem
analisadas (dados desestruturados)
Friday, March 2, 12

54. Testes de Usabilidade / Marcello Cardoso
Entrevistas explorando a campo
Focus Group (entrevistas em grupo)
1. De 3 a 10 participantes, representativos dos grupos em
estudo
2. Um orientador dirige os tópicos de discussão
Friday, March 2, 12

55. Testes de Usabilidade / Marcello Cardoso
Entrevistas explorando a campo
Focus Group (entrevistas em grupo)
vantagens desvantagens
Explora o contexto social e a O Lead user pode ser um
interação entre os envolvidos problema
(ambiente, contexto)
É prático para validar uma ideia O recrutamento é complicado, já
com um grupo de mercado. que a agenda de muitos é
considerada
Friday, March 2, 12

56. Questionários
Testes de Usabilidade / Marcello Cardoso
validando hipóteses
Friday, March 2, 12

57. Testes de Usabilidade / Marcello Cardoso
Questionários Validando hipóteses
oferecem quase sempre
opções fechadas de respostas
quanto
+ objetivo,
+ fechado o escopo
Friday, March 2, 12

58. Testes de Usabilidade / Marcello Cardoso
Questionários Validando hipóteses
Vantagens
1. São mais fáceis de serem analisados
2. Podem abranger um maior número de questões, por serem
mais objetivos
3. São replicados com maior facilidade
Friday, March 2, 12

59. Testes de Usabilidade / Marcello Cardoso
Questionários Validando hipóteses
Vantagens
4. Ajudam a definir subgrupos (Ex: grupo internautas. Qual subgrupo? Experiente,
intermediário ou iniciante?)
5. Podem ser projetados com variações para cada grupo
específico
6. Questionários longos podem ser subdivididos em partes para
facilitar preenchimento
Friday, March 2, 12

60. Testes de Usabilidade / Marcello Cardoso
Questionários Validando hipóteses
Cuidado com as faixas de respostas!
Podem se sobrepor Podem faltar
a) 10-20 a) 500 e 1 mil
b) 20-30 b) 2 e 3 mil
c) 30-40 c) 4 e 5 mil
d) 40-50 d) Acima de 6 mil
Friday, March 2, 12

61. Testes de Usabilidade / Marcello Cardoso
Questionários Validando hipóteses
Cuidado com as faixas de respostas!
Friday, March 2, 12

62. Testes de Usabilidade / Marcello Cardoso
Questionários Validando hipóteses
Respostas também podem ser binárias...
1. sim/não
2.curti/não curti
Friday, March 2, 12

63. Testes de Usabilidade / Marcello Cardoso
Questionários Validando hipóteses
...ou analógicas.
Friday, March 2, 12

64. Testes de Usabilidade / Marcello Cardoso
Questionários Validando hipóteses
Cuidados com questionários
Evite respostas com escalas negativas
Qual sua nota para o sorvete de Pistache?
a) -2
b) -1
c) 0
d) 1
e) 2
Friday, March 2, 12

65. Testes de Usabilidade / Marcello Cardoso
Questionários Validando hipóteses
Escala Likert
Afirmativas curtas seguidas de uma escala bipolar de
respostas graduais.
1. Gosto do meu cereal ao leite bem crocante pela manhã.
a) Concordo plenamente
b) Concordo
c) Não concordo nem discordo
d) Discordo
e) Discordo plenamente
Friday, March 2, 12

66. Testes de Usabilidade / Marcello Cardoso
Questionários Validando hipóteses
Escala Likert
Use número par se quiser forçar um posicionamento
1. Gosto do meu cereal ao leite bem crocante pela manhã.
a) Concordo plenamente
b) Concordo
c) Discordo
d) Discordo plenamente
Friday, March 2, 12

67. Testes de Usabilidade / Marcello Cardoso
Questionários Validando hipóteses
Escala Likert
Use o mesmo número de afirmações positivas e negativas. Se
vai misturá-las ou agrupá-las, é seu critério, e as opiniões
são divididas entre os autores sobre isto.
Friday, March 2, 12

68. Testes de Usabilidade / Marcello Cardoso
Questionários Validando hipóteses
Escala de diferencial semântico
Menos utilizada que as escalas likert, utilizam adjetivos
opostos, normalmente em uma grade. O usuário deve marcar
a posição que melhor representa sua opinião para cada item.
Friday, March 2, 12

69. Testes de Usabilidade / Marcello Cardoso
Interpretando dados
1. Procure padrões e tendências
2. Para menos de 60 participantes, respostas com número
reais. Para mais, porcentagens.
3. Para interpretar entrevistas, é ideal manter alguma
métrica ou código
Friday, March 2, 12

70. Testes de Usabilidade / Marcello Cardoso
TO DO DONE
ts)
Exercício (15p avaliar
m a para
ou siste
er um site rios) ou
1) Escolh ário (30 usuá
question
2) E laborar
suários) em uma
trevis ta (5 u le vantes
en ações re
ca r inform ula (10
3) Desta pr óxima a
e para
ação brev
apresent
slides)
Friday, March 2, 12

71. Testes de Usabilidade / Marcello Cardoso
igad o!
o br
Este arquivo contém a apresentação realizada por Marcello de
Campos Cardoso, em Fevereiro de 2012, para a disciplina Teste de
Usabilidade ministrada no curso de especialização Teste e
Qualidade de software, no Centro Universitário UNA.
Friday, March 2, 12