Capítulo 6
           Configurar um
          ambiente de teste



Fernando Figueroa | Leandro Monteiro | Mara Sampaio
Configurar um ambiente de teste
•   Testes de usabilidade são muito mais do que uma coleção
    de câmeras e gravadores. Requer esforço,
    comprometimento e tempo.
•   Não é necessário um laboratório elaborado e caro.
•   Começar pequeno é desejável, pois força concentração em
    outros fatores que contribuem para um programa de
    sucesso, tais como:
     o a construção de relacionamento com parceiros de
        negócio
     o e a especialização da equipe em conhecimentos básicos
        de métodos e técnicas de pesquisa centrada no usuário.
Determinar o local
do teste de usabilidade
Determinar o local
•   Nem todos os testes devem ser feitos num ambiente de
    laboratório.
•   Em campo, em laboratório ou remoto (cap 13)
•   Considere os fatores a seguir para determinar o local
    apropriado para o teste de usabilidade:
     o Projeto do teste
     o Logística
     o Relações públicas com a empresa
     o Disponibilidade dos participantes
Projeto do teste
•   É um teste formativo ou validativo?
•   Você precisa sentar perto do participante para coletar dados
    qualitativos, dar dicas ou manipular o produto testado?
•   Ou necessita observar de fora da sala de teste para que o
    testador não interaja com você no meio da tarefa?
Logística
•   Há espaço disponível no seu local de trabalho para servir de
    área de teste?
•   O local é acessível para os participantes?
•   Quão importante é que o patrocinador do teste mantenha
    anonimato? Se os participantes não devem saber quem está
    promovendo a pesquisa para não comprometer suas
    respostas, será melhor fazer os testes em um local neutro.
•   Existem aspectos do seu teste que só possam ser criados
    em laboratório? Por exemplo, o produto é um protótipo que
    não é portátil?
•   É necessário algum equipamento especial para coletar
    dados que só funcionariam num laboratório? Por exemplo,
    eye-tracking.
Relações públicas com a empresa
•   Você está usando o teste para demonstrar alguma idéia ou
    prática para alguém?
•   Haverão observadores? Quantos? Qual a posição deles na
    empresa? Por que eles vão observar os testes?
•   O que vai ser melhor para seus observadores? Estar na sala
    com o participante ou observar de outro local?
Disponibilidade dos participantes
•   É essencial que o testador esteja em um laboratório? Por
    que? O que você vai ganhar ou perder fazendo as sessões
    de teste num laboratório vs. aonde o testador normalmente
    faz as tarefas que você quer observar?
•   O quão fácil é para os participantes deixarem suas rotinas
    para participar do teste de usabilidade?
Teste em localizações
geográficas diferentes
Localizações geográficas
diferentes
•   Com a excessão de produtos internacionais, testar em
    múltiplas localizações geográficas deve ser considerado com
    cuidado.
•   Considere testar em locais diferentes dos quais você
    normalmente testa quando:
     o O local é dominado por um tipo de negócio ou cultura
        (exemplo: empregados do govendo em Washington, DC)
     o As experiências, orientações e atitudes das pessoas
        locais não condizem com o seu público alvo
     o Os locais não usam o produto em questão
Organizando testes no
ambiente do usuário
Testes no ambiente do usuário
•   Requer planejamento, pois a logística não é trivial.
    o Conseguir permição do gestor e do participante
    o Marcar dia e hora com o participante
    o Confirmar compromisso por telefone ou email
    o Mandar instruções e contratos com antecedência
    o Se você está testando um software ou site no seu laptop,
       lembre-se de instalar também softwares de captura de
       audio e video com antecedência
Laboratório de teste portátil
Recomendado para empresas ou
 organizações que estão iniciando em teste
 de usabilidade e/ou para aqueles com
 recursos limitados
Laboratório de teste portátil




Imagem: Nmgroup.com
Laboratório de teste portátil




Imagem: Nmgroup.com
Laboratório de teste portátil
•   Esta é uma opção com bom custo-benefício para começar,
    se não há espaço para dedicar permanentemente aos
    testes.
•   Vantagens:
     o Ver o usuário no seu contexto, em situação real
     o É mais fácil para o usuário participar do teste
     o Solução com bom custo-benefício
     o Com o equipamento portátil, você pode levá-lo para
        campo
     o Câmeras e laptops não precisam ser dedicados somente
        para este fim
Laboratório de teste portátil
•   Desvantagens:
    o Planejamento e logística podem ser complexo
       comparado a fazer todos os teste em um só local.
    o Pesquisas de campo tomam mais tempo
    o Há espaço limitado para observadores
    o Pode haver aspectos desconfortáveis e incoveniêntes no
       ambiente
    o Será necessário se adaptar a qualquer espaço
       disponível
    o Carregar equipamentos delicados de um lado pro outro
       diminui o tempo de vida útil deles
Criação de um
 laboratório
   de teste
Criação de um laboratório de teste
•   Nesta parte, apresentamos diferentes ambientes de testes;
•   Cada ambiente apresenta uma série de vantagens e
    desvantagens;
•   Cada uma delas presta-se a um determinado propósito
    (estilo, filosofia e finalidade do teste), bem como ao grau de
    sofisticação que o mesmo exige.
•   Veremos, adiante, as seguintes sugestões de ambiente:
     o Laboratório Simples;
     o Laboratório Simples Modificado;
     o Laboratório Grande;
     o Sala de Observação;
     o Laboratório Clássico.
Laboratório Simples
•   É o tipo mais básico, tanto em
    espaço quanto recurso;
•   Pode acomodar observadores
    e o moderador posiciona-se
    em um angulo de 45º do
    participante;
•   A idéia é manter o moderador
    perto, mas não tanto, do
    participante (dentro de sua
    visão periférica).
Laboratório Simples
Vantagens:
•   O moderador tem uma excelente visão
dos acontecimentos, como os sinais

•
não-verbais;
    Durante os testes exploratórios, o
moderador facilita a interação com o

•
participante;
    Por não deixar o participante sozinho, a presença do
moderador o encoraja a superar os desafios e averbalizar o

•
processo;
    Facilita a participação (através do moderador) dos
observadores.
Laboratório Simples
Desvantagens:
•   A presença e o comportamento
(anotações, suspiros etc) do moderador
podem influenciar o desempenho do

•
participante;
    Há um espaço muito limitado para os
observadores, e essa quantidade acaba por
ser definida pelo tamanho da sala. É ruim para o participante ter
   que estar com muitos observadores "em cima" e o controle
   por parte do moderador torna-se mais difícil.
Laboratório Simples Modificado
•   A principal diferença está na
    inserção de uma estação de
    trabalho exclusiva para o
    moderador;
•   Desta forma, e com uso de
    softwares especializados, o
    moderador pode acompanhar
    todo o processo com uma
    interferência menor, mas
    próximo o suficiente para
    encorajar o participante.
Laboratório Simples Modificado
Vantagens:
•   Enquanto o teste está em andamento, o
moderador está mais livre para se
movimentar, tomar notas, registrar e ainda

•
dentro do campo visual do participante;
    O participante não tem uma completa
sensação de isolamento, e esta configuração
de sala pode encorajá-lo a verbalizar suas
ações.
Laboratório Simples Modificado
Desvantagens:
•   O distanciamento faz com que o
moderador perca um pouco do seu campo
visual;
•   Sair da visão periférica do participante
pode causar um desconforto e comprometer

•
o desempenho do mesmo;
    Ainda é um espaço limitado para os
observadores
•   A presença do moderador, mesmo que
um pouco mais distante, pode causar desconforto ao
    participante, pois o mesmo pode se assustar com anotações
    e digitações.
Laboratório Grande
•   Embora moderador e participante
    ainda estejam próximos, esta sala
    é muito maior, podendo acomodar
    mais observadores e outros
    profissionais interessados;
•   Aqui, o moderador e o participante
    ficam na frente da sala;
•   Há um microfone ambiente para
    melhorar o aúdio e a tela do
    computador do participante pode
    ser projetada na parede, para
    permitir uma visualização de
    todos.
Laboratório Grande
Vantagens:
•   Possui as mesmas vantagens de um
laboratório simples;
•   Pode acomodar um grande número de
observadores. Permitindo um discussão
pós-teste mais efetiva;
•   Como todos os interessados podem estar
presentes, a gravação do teste deixa de ser vital;
•   Recolher as anotações e insights torna-se mais fácil.
Laboratório Grande

•
Desvantagens:
     É preciso treinamento e prática para

•
gerenciar os observadores;
     O moderador precisa se policiar para
que os moderadores não sejam uma

•
influencia negativa ou distração para o teste;
     Requer equipamento adicional como

•
microfones e um projetor;
     Os observadores provavelmente não será capaz de ver
comportamentos sutis do participante ou expressões faciais.
Sala de Observação
•   Permite a separação física
    dos observadores em

•
    relação a sala de testes;
    Embora possam assistir, os
    moderadores não podem se
    comunicar diretamente com

•
    o moderador;
    O audio e video com a tela
    do computador do
    participante, bem como
    suas atividades, são
    projetados nesta sala para
    acesso dos observadores.
Sala de Observação
Vantagens:
•   Possui as mesmas vantagens de um

•
laboratório simples;
    Os observadores não precisam se
preocupar em estarem interferindo o teste:
eles são livres para ir e vir quando quiserem,

•
sem distrair ninguém;
    E o mais importante: eles são capazes de
falar entre si, discutindo observações referente ao
teste.
Sala de Observação

•
Desvantagens:
    Tal como acontece com a instalação de
um laboratório simples, o comportamento do
moderador pode afetar negativamente o

•
teste, devido a sua presença;
    É preciso dispor de ao menos duas salas
durante os testes, o que pode ser inviável em
algumas situações.
Laboratório Clássico
•   Possui uma sala designada como
    a sala de testes e uma segunda
    sala designada como sala

•
    observação e de controle;
    Embora não seja uma regra, neste
    ambiente, somente o participante
    fica na sala de testes. Todos os
    outros envolvidos ficam na sala de

•
    observação/controle;
    Este laboratórios possuem
    multiplas câmeras de vídeo,
    gravadores de áudio, registradores
    de dados e equipamentos
    modernos eletrônico.
Laboratório Clássico

•
Vantagens:
    Por causa da sua discrição, permite uma

•
iniqualável coleta de dados;
    Se a sala de observação/controle for a
prova de som, não gera ruídos (distrações) e
a comunicação pode ser feita através de um

•
sistema de audio;
    Este ambiente pode acomodar muitos observadores e
permite um interação entre todos.
Laboratório Clássico

•
Desvantagens:
     Este tipo de laboratório pode criar um
ambiente muito impessoal, e o audio pode

•
assustar o participante;
     Se o usuário for leigo, pode se sentir

•
inseguro por falta de alguma presença física;
     Por causa da distância entre a equipe e o
participante, pode haver alguma perda de informação não-

•
    verbal;
     Para testes exploratórios, onde deve haver uma interação
entre o participante e moderador, este ambiente pode causar

•
dificuldades;
     O isolamento pode estimular a equipe a fazer observações e
conclusões antes do fim do teste, o que pode ser ruim.
Equipamentos, artefatos
     e ferramentas
Equipamentos, artefatos e
ferramentas


Qualquer que seja o local do teste, não
 esqueça de conferir todos os equipamentos
 e ferramentas básicas necessárias.
Equipamentos, artefatos e
ferramentas
Equipamento necessário:
•  Um laptop grande para o usuário;
•  Um laptop pequeno para o mediador;
•  Uma webcam para gravar o 'think aloud' do usuário e
   suas expressões faciais;
•  Um mouse para evitar os previsíveis contratempos de
   um touchpad;
•  Software para capturar as ações do usuário na tela.
Equipamentos, artefatos e
ferramentas
Formulários e ferramentas de anotação:
•  Formulários de consentimento, confidencialidade (se
   necessário)
•  questionários
•  Declaração de cessão de direitos de imagem
•  Um resumo das características dos participantes;
•  Roteiro da sessão;
•  Cenários para os participantes;
•  Instruções para os observadores;
•  Cronogramas da sessão
Equipamentos, artefatos e
ferramentas
Artefatos, adereços e assim por diante:
•  Protótipo ou o produto a ser testado;
•  Logins e senhas necessárias;
•  Dados falsos para tornar o teste mais realístico (um
   celular com mensagens, uma câmera com imagens
   para baixar, etc.)
Identifique co-
pesquisadores,
 assistentes e
 observadores
Co-pesquisadores, assistentes e
observadores

Não faça todo o trabalho sozinho. Procure ajuda,
  coloque outros envolvidos direcionando trabalhos
  específicos durante o teste.
Co-pesquisadores, assistentes e
observadores
•   Anotador
•   Timekeeper: responsável por controlar todo o tempo
    do teste
•   Técnico experiente no produto: responsável por
    cuidar do bom funcionamento do produto testado.
•   Additional testing roles: Pode ser necessário algum
    dos ajudantes desempenhar algum papel importante
    para o teste ser desencadeado;
•   Observadores do teste

Teste de usabilidade - Configurando o seu ambiente de testes

  • 1.
    Capítulo 6 Configurar um ambiente de teste Fernando Figueroa | Leandro Monteiro | Mara Sampaio
  • 2.
    Configurar um ambientede teste • Testes de usabilidade são muito mais do que uma coleção de câmeras e gravadores. Requer esforço, comprometimento e tempo. • Não é necessário um laboratório elaborado e caro. • Começar pequeno é desejável, pois força concentração em outros fatores que contribuem para um programa de sucesso, tais como: o a construção de relacionamento com parceiros de negócio o e a especialização da equipe em conhecimentos básicos de métodos e técnicas de pesquisa centrada no usuário.
  • 3.
    Determinar o local doteste de usabilidade
  • 4.
    Determinar o local • Nem todos os testes devem ser feitos num ambiente de laboratório. • Em campo, em laboratório ou remoto (cap 13) • Considere os fatores a seguir para determinar o local apropriado para o teste de usabilidade: o Projeto do teste o Logística o Relações públicas com a empresa o Disponibilidade dos participantes
  • 5.
    Projeto do teste • É um teste formativo ou validativo? • Você precisa sentar perto do participante para coletar dados qualitativos, dar dicas ou manipular o produto testado? • Ou necessita observar de fora da sala de teste para que o testador não interaja com você no meio da tarefa?
  • 6.
    Logística • Há espaço disponível no seu local de trabalho para servir de área de teste? • O local é acessível para os participantes? • Quão importante é que o patrocinador do teste mantenha anonimato? Se os participantes não devem saber quem está promovendo a pesquisa para não comprometer suas respostas, será melhor fazer os testes em um local neutro. • Existem aspectos do seu teste que só possam ser criados em laboratório? Por exemplo, o produto é um protótipo que não é portátil? • É necessário algum equipamento especial para coletar dados que só funcionariam num laboratório? Por exemplo, eye-tracking.
  • 7.
    Relações públicas coma empresa • Você está usando o teste para demonstrar alguma idéia ou prática para alguém? • Haverão observadores? Quantos? Qual a posição deles na empresa? Por que eles vão observar os testes? • O que vai ser melhor para seus observadores? Estar na sala com o participante ou observar de outro local?
  • 8.
    Disponibilidade dos participantes • É essencial que o testador esteja em um laboratório? Por que? O que você vai ganhar ou perder fazendo as sessões de teste num laboratório vs. aonde o testador normalmente faz as tarefas que você quer observar? • O quão fácil é para os participantes deixarem suas rotinas para participar do teste de usabilidade?
  • 9.
  • 10.
    Localizações geográficas diferentes • Com a excessão de produtos internacionais, testar em múltiplas localizações geográficas deve ser considerado com cuidado. • Considere testar em locais diferentes dos quais você normalmente testa quando: o O local é dominado por um tipo de negócio ou cultura (exemplo: empregados do govendo em Washington, DC) o As experiências, orientações e atitudes das pessoas locais não condizem com o seu público alvo o Os locais não usam o produto em questão
  • 11.
  • 12.
    Testes no ambientedo usuário • Requer planejamento, pois a logística não é trivial. o Conseguir permição do gestor e do participante o Marcar dia e hora com o participante o Confirmar compromisso por telefone ou email o Mandar instruções e contratos com antecedência o Se você está testando um software ou site no seu laptop, lembre-se de instalar também softwares de captura de audio e video com antecedência
  • 13.
    Laboratório de testeportátil Recomendado para empresas ou organizações que estão iniciando em teste de usabilidade e/ou para aqueles com recursos limitados
  • 14.
    Laboratório de testeportátil Imagem: Nmgroup.com
  • 15.
    Laboratório de testeportátil Imagem: Nmgroup.com
  • 16.
    Laboratório de testeportátil • Esta é uma opção com bom custo-benefício para começar, se não há espaço para dedicar permanentemente aos testes. • Vantagens: o Ver o usuário no seu contexto, em situação real o É mais fácil para o usuário participar do teste o Solução com bom custo-benefício o Com o equipamento portátil, você pode levá-lo para campo o Câmeras e laptops não precisam ser dedicados somente para este fim
  • 17.
    Laboratório de testeportátil • Desvantagens: o Planejamento e logística podem ser complexo comparado a fazer todos os teste em um só local. o Pesquisas de campo tomam mais tempo o Há espaço limitado para observadores o Pode haver aspectos desconfortáveis e incoveniêntes no ambiente o Será necessário se adaptar a qualquer espaço disponível o Carregar equipamentos delicados de um lado pro outro diminui o tempo de vida útil deles
  • 18.
    Criação de um laboratório de teste
  • 19.
    Criação de umlaboratório de teste • Nesta parte, apresentamos diferentes ambientes de testes; • Cada ambiente apresenta uma série de vantagens e desvantagens; • Cada uma delas presta-se a um determinado propósito (estilo, filosofia e finalidade do teste), bem como ao grau de sofisticação que o mesmo exige. • Veremos, adiante, as seguintes sugestões de ambiente: o Laboratório Simples; o Laboratório Simples Modificado; o Laboratório Grande; o Sala de Observação; o Laboratório Clássico.
  • 20.
    Laboratório Simples • É o tipo mais básico, tanto em espaço quanto recurso; • Pode acomodar observadores e o moderador posiciona-se em um angulo de 45º do participante; • A idéia é manter o moderador perto, mas não tanto, do participante (dentro de sua visão periférica).
  • 21.
    Laboratório Simples Vantagens: • O moderador tem uma excelente visão dos acontecimentos, como os sinais • não-verbais; Durante os testes exploratórios, o moderador facilita a interação com o • participante; Por não deixar o participante sozinho, a presença do moderador o encoraja a superar os desafios e averbalizar o • processo; Facilita a participação (através do moderador) dos observadores.
  • 22.
    Laboratório Simples Desvantagens: • A presença e o comportamento (anotações, suspiros etc) do moderador podem influenciar o desempenho do • participante; Há um espaço muito limitado para os observadores, e essa quantidade acaba por ser definida pelo tamanho da sala. É ruim para o participante ter que estar com muitos observadores "em cima" e o controle por parte do moderador torna-se mais difícil.
  • 23.
    Laboratório Simples Modificado • A principal diferença está na inserção de uma estação de trabalho exclusiva para o moderador; • Desta forma, e com uso de softwares especializados, o moderador pode acompanhar todo o processo com uma interferência menor, mas próximo o suficiente para encorajar o participante.
  • 24.
    Laboratório Simples Modificado Vantagens: • Enquanto o teste está em andamento, o moderador está mais livre para se movimentar, tomar notas, registrar e ainda • dentro do campo visual do participante; O participante não tem uma completa sensação de isolamento, e esta configuração de sala pode encorajá-lo a verbalizar suas ações.
  • 25.
    Laboratório Simples Modificado Desvantagens: • O distanciamento faz com que o moderador perca um pouco do seu campo visual; • Sair da visão periférica do participante pode causar um desconforto e comprometer • o desempenho do mesmo; Ainda é um espaço limitado para os observadores • A presença do moderador, mesmo que um pouco mais distante, pode causar desconforto ao participante, pois o mesmo pode se assustar com anotações e digitações.
  • 26.
    Laboratório Grande • Embora moderador e participante ainda estejam próximos, esta sala é muito maior, podendo acomodar mais observadores e outros profissionais interessados; • Aqui, o moderador e o participante ficam na frente da sala; • Há um microfone ambiente para melhorar o aúdio e a tela do computador do participante pode ser projetada na parede, para permitir uma visualização de todos.
  • 27.
    Laboratório Grande Vantagens: • Possui as mesmas vantagens de um laboratório simples; • Pode acomodar um grande número de observadores. Permitindo um discussão pós-teste mais efetiva; • Como todos os interessados podem estar presentes, a gravação do teste deixa de ser vital; • Recolher as anotações e insights torna-se mais fácil.
  • 28.
    Laboratório Grande • Desvantagens: É preciso treinamento e prática para • gerenciar os observadores; O moderador precisa se policiar para que os moderadores não sejam uma • influencia negativa ou distração para o teste; Requer equipamento adicional como • microfones e um projetor; Os observadores provavelmente não será capaz de ver comportamentos sutis do participante ou expressões faciais.
  • 29.
    Sala de Observação • Permite a separação física dos observadores em • relação a sala de testes; Embora possam assistir, os moderadores não podem se comunicar diretamente com • o moderador; O audio e video com a tela do computador do participante, bem como suas atividades, são projetados nesta sala para acesso dos observadores.
  • 30.
    Sala de Observação Vantagens: • Possui as mesmas vantagens de um • laboratório simples; Os observadores não precisam se preocupar em estarem interferindo o teste: eles são livres para ir e vir quando quiserem, • sem distrair ninguém; E o mais importante: eles são capazes de falar entre si, discutindo observações referente ao teste.
  • 31.
    Sala de Observação • Desvantagens: Tal como acontece com a instalação de um laboratório simples, o comportamento do moderador pode afetar negativamente o • teste, devido a sua presença; É preciso dispor de ao menos duas salas durante os testes, o que pode ser inviável em algumas situações.
  • 32.
    Laboratório Clássico • Possui uma sala designada como a sala de testes e uma segunda sala designada como sala • observação e de controle; Embora não seja uma regra, neste ambiente, somente o participante fica na sala de testes. Todos os outros envolvidos ficam na sala de • observação/controle; Este laboratórios possuem multiplas câmeras de vídeo, gravadores de áudio, registradores de dados e equipamentos modernos eletrônico.
  • 33.
    Laboratório Clássico • Vantagens: Por causa da sua discrição, permite uma • iniqualável coleta de dados; Se a sala de observação/controle for a prova de som, não gera ruídos (distrações) e a comunicação pode ser feita através de um • sistema de audio; Este ambiente pode acomodar muitos observadores e permite um interação entre todos.
  • 34.
    Laboratório Clássico • Desvantagens: Este tipo de laboratório pode criar um ambiente muito impessoal, e o audio pode • assustar o participante; Se o usuário for leigo, pode se sentir • inseguro por falta de alguma presença física; Por causa da distância entre a equipe e o participante, pode haver alguma perda de informação não- • verbal; Para testes exploratórios, onde deve haver uma interação entre o participante e moderador, este ambiente pode causar • dificuldades; O isolamento pode estimular a equipe a fazer observações e conclusões antes do fim do teste, o que pode ser ruim.
  • 35.
  • 36.
    Equipamentos, artefatos e ferramentas Qualquerque seja o local do teste, não esqueça de conferir todos os equipamentos e ferramentas básicas necessárias.
  • 37.
    Equipamentos, artefatos e ferramentas Equipamentonecessário: • Um laptop grande para o usuário; • Um laptop pequeno para o mediador; • Uma webcam para gravar o 'think aloud' do usuário e suas expressões faciais; • Um mouse para evitar os previsíveis contratempos de um touchpad; • Software para capturar as ações do usuário na tela.
  • 38.
    Equipamentos, artefatos e ferramentas Formuláriose ferramentas de anotação: • Formulários de consentimento, confidencialidade (se necessário) • questionários • Declaração de cessão de direitos de imagem • Um resumo das características dos participantes; • Roteiro da sessão; • Cenários para os participantes; • Instruções para os observadores; • Cronogramas da sessão
  • 39.
    Equipamentos, artefatos e ferramentas Artefatos,adereços e assim por diante: • Protótipo ou o produto a ser testado; • Logins e senhas necessárias; • Dados falsos para tornar o teste mais realístico (um celular com mensagens, uma câmera com imagens para baixar, etc.)
  • 40.
  • 41.
    Co-pesquisadores, assistentes e observadores Nãofaça todo o trabalho sozinho. Procure ajuda, coloque outros envolvidos direcionando trabalhos específicos durante o teste.
  • 42.
    Co-pesquisadores, assistentes e observadores • Anotador • Timekeeper: responsável por controlar todo o tempo do teste • Técnico experiente no produto: responsável por cuidar do bom funcionamento do produto testado. • Additional testing roles: Pode ser necessário algum dos ajudantes desempenhar algum papel importante para o teste ser desencadeado; • Observadores do teste