Desenvolvimento e Avaliação de um Sistema Multimodal eMultiusuário de Navegação Web               Elizabete Munzlinger    ...
Roteiro Introdução BrowserVox Interface de Voz e Interface Multimodal Tecnologias ASR e TTS Gramática Avaliação da I...
IntroduçãoMotivação Interação através da fala Tecnologias de fala – ASR e TTS Interface de Voz Interface Multimodal I...
Roteiro Introdução BrowserVox Interface de Voz e Interface Multimodal Tecnologias ASR e TTS Gramática Avaliação da I...
BrowserVoxCaracterísticas do navegador   Interface Multimodal       Interface Gráfica (mouse)       Interface de Voz (v...
BrowserVoxSistema   Arquitetura       Interface Application          Interface Gráfica          Interface de Voz      ...
BrowserVoxSistema   Arquitetura                  Arquitetura do Sistema BrowserVox
BrowserVoxSistema   Interface                Interface do Sistema BrowserVox
Roteiro Introdução BrowserVox Interface de Voz e Interface Multimodal Tecnologias ASR e TTS Gramática Avaliação da I...
InterfacesInterface Gráfica (GUI)   Características:       Interação com sistema através de dispositivos onde ocorre a  ...
InterfacesInterface de Voz (VUI)   Características:       Interação com sistema exclusivamente por fala       Dissemina...
InterfacesInterface Multimodal   Características:       Interface em que ocorre a combinação de dois ou mais        modo...
InterfacesInterface Multiusuário   Características:       Pode ser utilizada por qualquer usuário a qualquer        mome...
Roteiro Introdução BrowserVox Interfaces Tecnologias ASR e TTS Gramática Avaliação da Interface Conclusão
Tecnologias de FalaTecnologias   Reconhecimento automático de fala (ASR)       Receba um comando de voz e imediatamente ...
Roteiro Introdução BrowserVox Interface de Voz e Interface Multimodal Tecnologias ASR e TTS Gramática Avaliação da I...
GramáticasJSGF e JSML   Gramática de Reconhecimento       Java Speech Grammar Format (JSGF)   Gramática de Síntese    ...
GramáticasProjeto da Gramática JSGF   Gramática de Reconhecimento       Regras       Sub-regras       Símbolos terminais
GramáticasProjeto da Gramática JSGF – Palavras complementares
GramáticasProjeto da Gramática JSGF – Exemplos de Comandos
Roteiro Introdução BrowserVox Interface de Voz e Interface Multimodal Tecnologias ASR e TTS Gramática Avaliação da I...
Avaliação da InterfaceAvaliação de usabilidade   Avaliação empírica com testes através da técnica de    Engenharia de Usa...
Avaliação da InterfacePreparação da avaliação de usabilidade Lista de quatro tarefas Um questionário       Os critérios...
Avaliação da InterfacePreparação da avaliação de usabilidade   Lista de tarefas:       Separadas em estratégicas e freqü...
Avaliação da InterfacePreparação da avaliação de usabilidade   Usuários:       Os usuários selecionados para essa avalia...
Avaliação da InterfacePreparação da avaliação de usabilidade   O questionário objetivo:       Aborda características pri...
Avaliação da InterfacePreparação da avaliação de usabilidade   O questionário objetivo
Avaliação da InterfaceDados Coletados   Média (por critério)
Avaliação da InterfaceAvaliação dos resultados   Satisfatório       Sistema em fase de protótipo       O tempo de reali...
Roteiro Introdução BrowserVox Interface de Voz e Interface Multimodal Tecnologias ASR e TTS Gramática Avaliação da I...
ConclusãoConclusão   Viabilidade da aplicação de voz depende de diversos    fatores:       Ordem subjetiva (usuário: pec...
Obrigada!                  [proibido perguntas ]  Instituto Tecnológico de Aeronáutica             Divisão de Ciência da ...
Próximos SlideShares
Carregando em…5
×

Desenvolvimento e Avaliação de um Sistema Multimodal e Multiusuário de Navegação Web

931 visualizações

Publicada em

Apresentação Webmedia2008

  • Seja o primeiro a comentar

  • Seja a primeira pessoa a gostar disto

Desenvolvimento e Avaliação de um Sistema Multimodal e Multiusuário de Navegação Web

  1. 1. Desenvolvimento e Avaliação de um Sistema Multimodal eMultiusuário de Navegação Web Elizabete Munzlinger & Carlos Henrique Q. Forster ITA – Instituto Tecnológico de Aeronáutica EEC-I – Engenharia Eletrônica e Computação – Informática Divisão de Ciência da Computação
  2. 2. Roteiro Introdução BrowserVox Interface de Voz e Interface Multimodal Tecnologias ASR e TTS Gramática Avaliação da Interface Conclusão
  3. 3. IntroduçãoMotivação Interação através da fala Tecnologias de fala – ASR e TTS Interface de Voz Interface Multimodal Interface Multiusuário Objetivo do trabalho:  Avaliar o desempenho e a viabilidade de um sistema de navegação web multimodal e multiusuário
  4. 4. Roteiro Introdução BrowserVox Interface de Voz e Interface Multimodal Tecnologias ASR e TTS Gramática Avaliação da Interface Conclusão
  5. 5. BrowserVoxCaracterísticas do navegador Interface Multimodal  Interface Gráfica (mouse)  Interface de Voz (voz) Interface Multiusuário  Independente de usuário e de treinamento Variação de comandos  Gramática com palavras complementares
  6. 6. BrowserVoxSistema Arquitetura  Interface Application  Interface Gráfica  Interface de Voz  Sistema de registro (log)  Geração das Gramáticas JSGF e JSML (Transcoding)  Speech Plataform  Reconhecimento de Fala e Síntese de Texto  Componentes ASR, TTS (IBM Via Voice) e JSAPI
  7. 7. BrowserVoxSistema Arquitetura Arquitetura do Sistema BrowserVox
  8. 8. BrowserVoxSistema Interface Interface do Sistema BrowserVox
  9. 9. Roteiro Introdução BrowserVox Interface de Voz e Interface Multimodal Tecnologias ASR e TTS Gramática Avaliação da Interface Conclusão
  10. 10. InterfacesInterface Gráfica (GUI) Características:  Interação com sistema através de dispositivos onde ocorre a manipulação de elementos visuais (manipulação direta)  Mais utilizada atualmente  Representar elementos do mundo real
  11. 11. InterfacesInterface de Voz (VUI) Características:  Interação com sistema exclusivamente por fala  Disseminado em diversos domínios:  Dispositivos móveis  Sistemas desktop de escritório, médicas, empresariais, educativas e militares  Automação residencial e controle industrial  Serviços de telecomunicações  Ferramenta de transformação de interfaces monomodais em multimodais
  12. 12. InterfacesInterface Multimodal Características:  Interface em que ocorre a combinação de dois ou mais modos/estilos de interação com sistema. Ex:  Mouse e teclado + luvas táteis  Mouse e teclado + reconhecimento de gestos  Tela sensível ao toque + reconhecimento de fala  Mouse e teclado + reconhecimento de fala  Oferece nova experiência ao usuário
  13. 13. InterfacesInterface Multiusuário Características:  Pode ser utilizada por qualquer usuário a qualquer momento sem que para isso necessite uma configuração particular dependente do usuário ou de um processo de treinamento para gerar essa configuração  Necessidade em sistemas multimodais  Desejável em sistemas com Interface de Voz
  14. 14. Roteiro Introdução BrowserVox Interfaces Tecnologias ASR e TTS Gramática Avaliação da Interface Conclusão
  15. 15. Tecnologias de FalaTecnologias Reconhecimento automático de fala (ASR)  Receba um comando de voz e imediatamente o converta em texto desde que reconhecido de acordo com as regras da linguagem (IBM ViaVoice, Português-Brasileiro) Síntese de texto (TTS)  Converte a representação digital de um texto, em fala sintetizada (IBM ViaVoice, Português-Brasileiro) Biblioteca de acesso ao Engine IBM  JSAPI (Java Speech Application Programming Interface)
  16. 16. Roteiro Introdução BrowserVox Interface de Voz e Interface Multimodal Tecnologias ASR e TTS Gramática Avaliação da Interface Conclusão
  17. 17. GramáticasJSGF e JSML Gramática de Reconhecimento  Java Speech Grammar Format (JSGF) Gramática de Síntese  Java Speech Makup Language (JSML)
  18. 18. GramáticasProjeto da Gramática JSGF Gramática de Reconhecimento Regras Sub-regras Símbolos terminais
  19. 19. GramáticasProjeto da Gramática JSGF – Palavras complementares
  20. 20. GramáticasProjeto da Gramática JSGF – Exemplos de Comandos
  21. 21. Roteiro Introdução BrowserVox Interface de Voz e Interface Multimodal Tecnologias ASR e TTS Gramática Avaliação da Interface Conclusão
  22. 22. Avaliação da InterfaceAvaliação de usabilidade Avaliação empírica com testes através da técnica de Engenharia de Usabilidade com os cinco critérios introduzidos por Nielsen (1993): 1. Intuitividade 2. Eficiência 3. Memorização 4. Erro 5. Satisfação
  23. 23. Avaliação da InterfacePreparação da avaliação de usabilidade Lista de quatro tarefas Um questionário  Os critérios 1 a 4 (Intuitividade, Eficiência, Memorização, Erro) foram avaliados basicamente através de observação e medição de dados coletados durante as tarefas (executadas 2 vezes pelos usuários).  O critério 5 (Satisfação) através de questionário objetivo com pontuação para itens específicos
  24. 24. Avaliação da InterfacePreparação da avaliação de usabilidade Lista de tarefas:  Separadas em estratégicas e freqüentes
  25. 25. Avaliação da InterfacePreparação da avaliação de usabilidade Usuários:  Os usuários selecionados para essa avaliação pertencem às categorias de iniciantes e avançados, com número de participantes igual a 10
  26. 26. Avaliação da InterfacePreparação da avaliação de usabilidade O questionário objetivo:  Aborda características prioritárias e valores quantitativos para o critério 5, onde o usuário deverá pontuar de 1 a 5 os tópicos de acordo com a sua satisfação
  27. 27. Avaliação da InterfacePreparação da avaliação de usabilidade O questionário objetivo
  28. 28. Avaliação da InterfaceDados Coletados Média (por critério)
  29. 29. Avaliação da InterfaceAvaliação dos resultados Satisfatório  Sistema em fase de protótipo  O tempo de realização das 4 tarefas pelos 10 usuários estiveram dentro do tempo esperado, para a 1ª e 2ª execução.  A pontuação do questionário também atendeu às expectativas  Sistema é aplicável  Grande chance de aceitação e uso por usuários de diferentes níveis de formação  Fatores de ordem subjetiva  Nível de qualificação do usuário, tipo e complexidade de aplicação, capacidade de aprendizagem, aceitação, domínio da tarefa, entre outros.
  30. 30. Roteiro Introdução BrowserVox Interface de Voz e Interface Multimodal Tecnologias ASR e TTS Gramática Avaliação da Interface Conclusão
  31. 31. ConclusãoConclusão Viabilidade da aplicação de voz depende de diversos fatores:  Ordem subjetiva (usuário: peculiaridades de ordem social, cultural)  Problemas tecnológicos (despadronização dos sites)  Linguagem ampla (símbolos, abreviauras, termos estrangeiros) Vantagens:  Interface multiusuário e multimodal  Gramáticas
  32. 32. Obrigada! [proibido perguntas ] Instituto Tecnológico de Aeronáutica Divisão de Ciência da Computação – IECPrograma de Pós-Graduação em Engenharia Eletrônica e Computação Área de Informática – PG/EEC-I

×