Avaliação de usabilidade  e arquitetura de informações estatísticas na Internet  metodologia de pesquisa no estudo  de caso do portal do IBGE   LUIZ AGNER
Apresentação
Apresentação Pesquisa de Doutorado realizada junto ao Departamento de Artes e Design da PUC-Rio Laboratório de Ergonomia e Usabilidade de Interfaces Humano-Computador (LEUI) Linha de pesquisa: Usabilidade  Orientadora:  Prof. Anamaria de Moraes (DSc)
Disciplina derivada da ergonomia (interação homem-máquina) Preocupada com o design de sistemas computacionais eficientes, funcionais e agradáveis aos usuários. Interação humano-computador
Interação humano-computador sistema contexto tarefa homem
Interação humano-computador sistema contexto tarefa homem
Significa garantir aos usuários dos sistemas: 1 - efetividade 2 - eficiência 3 - satisfação   (ISO 9241 / International Standards Organization)   Usabilidade: o conceito
Usabilidade  é definida como a medida na qual um produto pode ser usado por usuários específicos para alcançar objetivos específicos com  efetividade, eficiência e satisfação  num contexto específico de uso. (ISO 9241 / International Standards Organization)     Usabilidade: o conceito
Usabilidade: o conceito Fatores: · facilidade de  aprendizado ; · facilidade de  memorização ; . maior  produtividade ; · redução de  erros ; ·  satisfação  subjetiva do usuário.
Citando Steve Krug: “ Quando criamos sites, agimos como se os usuários fossem analisar atentamente cada página, lendo o nosso texto com a devida atenção, descobrindo como nós organizamos a informação, e pesando cada opção cuidadosamente, antes de decidir em que  link  vão clicar.” (Não Me Faça Pensar)
Citando Steve Krug: “ A realidade dos usuários é mais parecida com passar de carro por um outdoor a 140 km por hora”.
Como são planejados os sites
Como são planejados os sites
Mapa de atenção
Como realmente usamos a web
Como realmente usamos a web
Pergunta no ar: Se nossas intenções são  as melhores possíveis, então... Por que os usuários  não agem conforme  o planejado?
Steve Krug: Fato 1:  Os usuários não lêem as páginas. Apenas dão uma rápida olhada nelas.
Steve Krug: Fato 2:  Os usuários não fazem escolhas ideais. Fazem apenas o que é suficiente.
Steve Krug: Fato 3:  Não querem descobrir como as coisas funcionam. Apenas querem atingir o objetivo.
O usuário está orientado à tarefa Uma interface mal desenhada requer que o usuário decomponha as suas tarefas de modo  não-intuitivo  (que não espelha o seu modelo mental)   isto gera erros e problemas de navegação.
Princípios  da usabilidade 10 critérios heurísticos Jakob  Nielsen Pesquisador e consultor de usabilidade.
1- Visibilidade do status do sistema
2 – Sistema e mundo real
3 – Liberdade e controle do usuário
4 – Consistência e padrões
5 – Prevenção de erros
6 – Reconhecer x relembrar
7 – Flexibilidade e eficiência
8 - Design minimalista
9 – Mensagens de erro
10 – Ajudas e documentação
Conceito de  information overload Uma edição do  The New York Times  em um dia de semana contém mais informação do que o comum dos mortais poderia receber durante toda vida na Inglaterra do século XVII.  (WURMAN, 1991). Em 2013, a residência média terá 10 terabytes de dados armazenados (fotos, filmes, músicas), mais do que os maiores bancos tinham há 5 anos. (Joel Schwartz, vice-presidente da EMC).
Conceito de  information overload A era da  explosão da informação
Conceito de  information overload A era da informação é, na verdade, uma explosão da não-informação – uma explosão de dados.  Informação deve ser aquilo que leva à compreensão  (WURMAN, 1991).
Arquitetura de informação É um novo campo no webdesign.  difere do design ou programação visual, pelo fato de focalizar a  estrutura  do website e não a funcionalidade ou aspecto.  tem como objetivo a construção de websites fáceis de usar, que preencham as necessidades dos clientes e os objetivos dos usuários  (VAN DIJCK, 2003)
Classificação da informação
quadrados verdes  círculos laranja triângulos azuis blocos oliva caixas sólidas bolinhas de gude esferas pequenas figuras ocas montanhas altas Classificação  é quase sempre um processo inconsciente. Quando definimos categorias, escolhemos quais  atributos  ou  propriedades  a  destacar .
Classificação da informação
Classificação da informação VINHOS: País Regiões - Ano de produção - Tipo de uva - Preço - Combinações - Vinícolas - Tipo de vinho
Classificação da informação CA Vídeo Cobal Humaitá
Classificação da informação CA Vídeo Cobal Humaitá
Classificação da informação CA Vídeo Cobal Humaitá
Classificação da informação Você organizaria melhor?
Classificação da informação Locadora Tijuca
Modelos mentais Modelo do usuário Modelo do projetista Modelo do sistema
Modelos mentais Modelo do usuário Modelo do projetista Modelo do sistema
Comportamentos de busca da informação Busca por um item conhecido Exploração Usuário não sabe o que precisa Reencontrar um item
Testes de usabilidade Técnica de pesquisa etnográfica. Processo empírico de se aprender sobre a usabilidade de um produto, observando os usuários durante a sua utilização.
Testes de usabilidade São empregados para  avaliação  de: - Web sites e aplicações na Internet,  - na indústria de  software ,  - na telefonia móvel,  - na comunicação técnica  - produtos industriais etc.
Testes de usabilidade É o processo que envolve o  feedback   vivo  de usuários operando tarefas reais,  registrados  em vídeo ou gravações de áudio e em condições controladas. Define se os usuários podem encontrar e utilizar os recursos, dentro do  tempo  e com o  esforço  que  desejam  despender.
Testes de usabilidade Testes do Projeto  Better   Desktop.Org
Testes de usabilidade Teste do Portal IBGE PUC-Rio
Testes de usabilidade Existem várias  estruturas  possíveis para a realização de testes de usabilidade. O ideal é a utilização de  duas salas –  uma reservada aos testes e outra reservada à observação.
Laboratórios de usabilidade
Laboratórios de usabilidade
Laboratórios de usabilidade
Laboratórios de usabilidade
Laboratórios de usabilidade
Laboratórios de usabilidade
Ciclo do produto
Métricas O  tempo  da tarefa; A porcentagem de tarefas  completadas ; A porcentagem de tarefas  não completadas ; Número de  erros ; Tempo  de navegação em busca da informação; Número de  passos ; Número de  cliques ; Quantidade  de informações encontradas; Número de acessos à  ajuda .
Softwares (exemplo)
Amostra
Tarefa 1 A partir da home page do portal IBGE, identifique em que estado do Brasil reside a maior concentração de pessoas idosas.
Tarefa 2 A partir da home page do portal IBGE, descubra em que bairro da cidade de Recife reside a maior concentração de cidadãos da terceira idade.
Testes de campo
Testes de campo
Participantes
Participantes
Participantes
Participantes
Participantes
Resultados
Resultados
Resultados
Resultados
Entrevistas abertas
Respostas ao questionário
Respostas ao questionário
Respostas ao questionário
Problemas emergenciais Problema que pode até ser importante, mas não é estritamente considerado um problema de usabilidade. Outros 5 Problema localizado ou menor; pode ser objeto de futuro aprimoramento. Menor 4 Gera um impacto moderado na usabilidade. Médio 3 Problema que gera uma significativa demora ou frustração. Maior 2 Problema que impede a realização das tarefas e que precisa ser urgentemente corrigido. Emergencial 1 Descrição Grau severidade
Problemas emergenciais Problema que pode até ser importante, mas não é estritamente considerado um problema de usabilidade. Outros 5 Problema localizado ou menor; pode ser objeto de futuro aprimoramento. Menor 4 Gera um impacto moderado na usabilidade. Médio 3 Problema que gera uma significativa demora ou frustração. Maior 2 Problema que impede a realização das tarefas e que precisa ser urgentemente corrigido. Emergencial 1 Descrição Grau severidade
Conclusões A pesquisa não tem a pretensão de se tornar a palavra final sobre o assunto. É apenas uma primeira abordagem. Novas pesquisas precisam ser realizadas com outros segmentos do público-alvo do IBGE: - usuários avançados - jornalistas - adolescentes -  crianças
Conclusões Os problemas relacionam-se largamente à ineficiência dos mecanismos de busca, à taxonomia aparentemente ilógica ou incompleta, à falta de clareza dos rótulos e links, e aos problemas de redação.
Conclusões Modelo mental:  Os usuários esperavam acessar a informação partindo de um nível temático geral para o específico.  A metáfora geográfica também representou forte referência mental.  O portal não refletiu as expectativas.
Conclusões Deve adotar novas formas de organizar e estruturar a sua informação, de modo a facilitar o acesso dos dados aos pesquisadores que não estão familiarizados com os nomes, terminologias ou as metodologias de suas pesquisas.
Conclusões Prover diferentes dimensões de acesso à informação: Taxonomias alternativas:  temas,  localização geográfica,  formatos,  eventos da vida públicos-alvo e  títulos das pesquisas.
Conclusões A consistência do sistema de rotulação deve ser garantida quanto a  estilo de apresentação, sintaxe, granularidade, completude e linguagem do usuário.  O sistema de rotulação deve evitar o emprego de jargões da organização como a sigla SIDRA.
Conclusões Além das linguagens  técnica ,  jornalística  e  pedagógica , uma quarta linguagem precisará ser concebida para facilitar a apresentação de informações ao cidadão e garantir a compreensão.  A linguagem do  cidadão comum .
Institucionalização da usabilidade Incorporar os métodos e técnicas de avaliação de usabilidade. Desafio da tomada de consciência da usabilidade como uma disciplina formal do Design. Importância da  institucionalização da usabilidade .
Consideração final
Consideração final
Consideração final
Consideração final
Consideração final
Consideração final Sugestão : Testes de usabilidade e outras pesquisas com usuários podem ser incorporadas, dentro do processo de desenvolvimento e contratação das interfaces do IBGE, como diferencial de qualidade.
Consideração final O IBGE deve desenvolver uma  cultura  interna de apoio a este tipo de metodologia.
Obrigado. Luiz Agner agner @ ibge.gov.br
Mais informação

Seminario Lep Ibge Slideshare

  • 1.
    Avaliação de usabilidade e arquitetura de informações estatísticas na Internet metodologia de pesquisa no estudo de caso do portal do IBGE LUIZ AGNER
  • 2.
  • 3.
    Apresentação Pesquisa deDoutorado realizada junto ao Departamento de Artes e Design da PUC-Rio Laboratório de Ergonomia e Usabilidade de Interfaces Humano-Computador (LEUI) Linha de pesquisa: Usabilidade Orientadora: Prof. Anamaria de Moraes (DSc)
  • 4.
    Disciplina derivada daergonomia (interação homem-máquina) Preocupada com o design de sistemas computacionais eficientes, funcionais e agradáveis aos usuários. Interação humano-computador
  • 5.
  • 6.
  • 7.
    Significa garantir aosusuários dos sistemas: 1 - efetividade 2 - eficiência 3 - satisfação (ISO 9241 / International Standards Organization) Usabilidade: o conceito
  • 8.
    Usabilidade édefinida como a medida na qual um produto pode ser usado por usuários específicos para alcançar objetivos específicos com efetividade, eficiência e satisfação num contexto específico de uso. (ISO 9241 / International Standards Organization) Usabilidade: o conceito
  • 9.
    Usabilidade: o conceitoFatores: · facilidade de aprendizado ; · facilidade de memorização ; . maior produtividade ; · redução de erros ; · satisfação subjetiva do usuário.
  • 10.
    Citando Steve Krug:“ Quando criamos sites, agimos como se os usuários fossem analisar atentamente cada página, lendo o nosso texto com a devida atenção, descobrindo como nós organizamos a informação, e pesando cada opção cuidadosamente, antes de decidir em que link vão clicar.” (Não Me Faça Pensar)
  • 11.
    Citando Steve Krug:“ A realidade dos usuários é mais parecida com passar de carro por um outdoor a 140 km por hora”.
  • 12.
  • 13.
  • 14.
  • 15.
  • 16.
  • 17.
    Pergunta no ar:Se nossas intenções são as melhores possíveis, então... Por que os usuários não agem conforme o planejado?
  • 18.
    Steve Krug: Fato1: Os usuários não lêem as páginas. Apenas dão uma rápida olhada nelas.
  • 19.
    Steve Krug: Fato2: Os usuários não fazem escolhas ideais. Fazem apenas o que é suficiente.
  • 20.
    Steve Krug: Fato3: Não querem descobrir como as coisas funcionam. Apenas querem atingir o objetivo.
  • 21.
    O usuário estáorientado à tarefa Uma interface mal desenhada requer que o usuário decomponha as suas tarefas de modo não-intuitivo (que não espelha o seu modelo mental) isto gera erros e problemas de navegação.
  • 22.
    Princípios dausabilidade 10 critérios heurísticos Jakob Nielsen Pesquisador e consultor de usabilidade.
  • 23.
    1- Visibilidade dostatus do sistema
  • 24.
    2 – Sistemae mundo real
  • 25.
    3 – Liberdadee controle do usuário
  • 26.
  • 27.
  • 28.
    6 – Reconhecerx relembrar
  • 29.
    7 – Flexibilidadee eficiência
  • 30.
    8 - Designminimalista
  • 31.
  • 32.
    10 – Ajudase documentação
  • 33.
    Conceito de information overload Uma edição do The New York Times em um dia de semana contém mais informação do que o comum dos mortais poderia receber durante toda vida na Inglaterra do século XVII. (WURMAN, 1991). Em 2013, a residência média terá 10 terabytes de dados armazenados (fotos, filmes, músicas), mais do que os maiores bancos tinham há 5 anos. (Joel Schwartz, vice-presidente da EMC).
  • 34.
    Conceito de information overload A era da explosão da informação
  • 35.
    Conceito de information overload A era da informação é, na verdade, uma explosão da não-informação – uma explosão de dados. Informação deve ser aquilo que leva à compreensão (WURMAN, 1991).
  • 36.
    Arquitetura de informaçãoÉ um novo campo no webdesign. difere do design ou programação visual, pelo fato de focalizar a estrutura do website e não a funcionalidade ou aspecto. tem como objetivo a construção de websites fáceis de usar, que preencham as necessidades dos clientes e os objetivos dos usuários (VAN DIJCK, 2003)
  • 37.
  • 38.
    quadrados verdes círculos laranja triângulos azuis blocos oliva caixas sólidas bolinhas de gude esferas pequenas figuras ocas montanhas altas Classificação é quase sempre um processo inconsciente. Quando definimos categorias, escolhemos quais atributos ou propriedades a destacar .
  • 39.
  • 40.
    Classificação da informaçãoVINHOS: País Regiões - Ano de produção - Tipo de uva - Preço - Combinações - Vinícolas - Tipo de vinho
  • 41.
    Classificação da informaçãoCA Vídeo Cobal Humaitá
  • 42.
    Classificação da informaçãoCA Vídeo Cobal Humaitá
  • 43.
    Classificação da informaçãoCA Vídeo Cobal Humaitá
  • 44.
    Classificação da informaçãoVocê organizaria melhor?
  • 45.
  • 46.
    Modelos mentais Modelodo usuário Modelo do projetista Modelo do sistema
  • 47.
    Modelos mentais Modelodo usuário Modelo do projetista Modelo do sistema
  • 48.
    Comportamentos de buscada informação Busca por um item conhecido Exploração Usuário não sabe o que precisa Reencontrar um item
  • 49.
    Testes de usabilidadeTécnica de pesquisa etnográfica. Processo empírico de se aprender sobre a usabilidade de um produto, observando os usuários durante a sua utilização.
  • 50.
    Testes de usabilidadeSão empregados para avaliação de: - Web sites e aplicações na Internet, - na indústria de software , - na telefonia móvel, - na comunicação técnica - produtos industriais etc.
  • 51.
    Testes de usabilidadeÉ o processo que envolve o feedback vivo de usuários operando tarefas reais, registrados em vídeo ou gravações de áudio e em condições controladas. Define se os usuários podem encontrar e utilizar os recursos, dentro do tempo e com o esforço que desejam despender.
  • 52.
    Testes de usabilidadeTestes do Projeto Better Desktop.Org
  • 53.
    Testes de usabilidadeTeste do Portal IBGE PUC-Rio
  • 54.
    Testes de usabilidadeExistem várias estruturas possíveis para a realização de testes de usabilidade. O ideal é a utilização de duas salas – uma reservada aos testes e outra reservada à observação.
  • 55.
  • 56.
  • 57.
  • 58.
  • 59.
  • 60.
  • 61.
  • 62.
    Métricas O tempo da tarefa; A porcentagem de tarefas completadas ; A porcentagem de tarefas não completadas ; Número de erros ; Tempo de navegação em busca da informação; Número de passos ; Número de cliques ; Quantidade de informações encontradas; Número de acessos à ajuda .
  • 63.
  • 64.
  • 65.
    Tarefa 1 Apartir da home page do portal IBGE, identifique em que estado do Brasil reside a maior concentração de pessoas idosas.
  • 66.
    Tarefa 2 Apartir da home page do portal IBGE, descubra em que bairro da cidade de Recife reside a maior concentração de cidadãos da terceira idade.
  • 67.
  • 68.
  • 69.
  • 70.
  • 71.
  • 72.
  • 73.
  • 74.
  • 75.
  • 76.
  • 77.
  • 78.
  • 79.
  • 80.
  • 81.
  • 82.
    Problemas emergenciais Problemaque pode até ser importante, mas não é estritamente considerado um problema de usabilidade. Outros 5 Problema localizado ou menor; pode ser objeto de futuro aprimoramento. Menor 4 Gera um impacto moderado na usabilidade. Médio 3 Problema que gera uma significativa demora ou frustração. Maior 2 Problema que impede a realização das tarefas e que precisa ser urgentemente corrigido. Emergencial 1 Descrição Grau severidade
  • 83.
    Problemas emergenciais Problemaque pode até ser importante, mas não é estritamente considerado um problema de usabilidade. Outros 5 Problema localizado ou menor; pode ser objeto de futuro aprimoramento. Menor 4 Gera um impacto moderado na usabilidade. Médio 3 Problema que gera uma significativa demora ou frustração. Maior 2 Problema que impede a realização das tarefas e que precisa ser urgentemente corrigido. Emergencial 1 Descrição Grau severidade
  • 84.
    Conclusões A pesquisanão tem a pretensão de se tornar a palavra final sobre o assunto. É apenas uma primeira abordagem. Novas pesquisas precisam ser realizadas com outros segmentos do público-alvo do IBGE: - usuários avançados - jornalistas - adolescentes - crianças
  • 85.
    Conclusões Os problemasrelacionam-se largamente à ineficiência dos mecanismos de busca, à taxonomia aparentemente ilógica ou incompleta, à falta de clareza dos rótulos e links, e aos problemas de redação.
  • 86.
    Conclusões Modelo mental: Os usuários esperavam acessar a informação partindo de um nível temático geral para o específico. A metáfora geográfica também representou forte referência mental. O portal não refletiu as expectativas.
  • 87.
    Conclusões Deve adotarnovas formas de organizar e estruturar a sua informação, de modo a facilitar o acesso dos dados aos pesquisadores que não estão familiarizados com os nomes, terminologias ou as metodologias de suas pesquisas.
  • 88.
    Conclusões Prover diferentesdimensões de acesso à informação: Taxonomias alternativas: temas, localização geográfica, formatos, eventos da vida públicos-alvo e títulos das pesquisas.
  • 89.
    Conclusões A consistênciado sistema de rotulação deve ser garantida quanto a estilo de apresentação, sintaxe, granularidade, completude e linguagem do usuário. O sistema de rotulação deve evitar o emprego de jargões da organização como a sigla SIDRA.
  • 90.
    Conclusões Além daslinguagens técnica , jornalística e pedagógica , uma quarta linguagem precisará ser concebida para facilitar a apresentação de informações ao cidadão e garantir a compreensão. A linguagem do cidadão comum .
  • 91.
    Institucionalização da usabilidadeIncorporar os métodos e técnicas de avaliação de usabilidade. Desafio da tomada de consciência da usabilidade como uma disciplina formal do Design. Importância da institucionalização da usabilidade .
  • 92.
  • 93.
  • 94.
  • 95.
  • 96.
  • 97.
    Consideração final Sugestão: Testes de usabilidade e outras pesquisas com usuários podem ser incorporadas, dentro do processo de desenvolvimento e contratação das interfaces do IBGE, como diferencial de qualidade.
  • 98.
    Consideração final OIBGE deve desenvolver uma cultura interna de apoio a este tipo de metodologia.
  • 99.
    Obrigado. Luiz Agneragner @ ibge.gov.br
  • 100.