O que é / para que serve: Formas avaliativas que a equipe de projeto utiliza para coletar dados durante a execução de uma determinada tarefa (ou conjunto de tarefas) feita pelos usuários ao interagir com o sistema. Os resultados buscam validar a usabilidade e/ou identificar frustrações, dificuldades durante a interação para possíveis melhorias antes da entrega do sistema.

Diretrizes para realizar um teste de Usabilidade

• Antes de iniciar o teste
  • Certifique-se de que todos os materiais e equipamentos de teste necessários estão disponíveis.
  • Explique que o objetivo é testar o sistema, não os participantes.
  • Explicar como os materiais e registros de teste serão usados.
  • Se um acordo de consentimento for assinado, explique todas as informações nele contidas.
  • Se os protocolos verbais forem coletados, deixe os participantes praticarem o pensamento em voz alta.
  • Certifique-se de que todas as perguntas dos participantes foram respondidas e que os participantes estão confortáveis com todos os procedimentos.
• Durante o teste
  • Minimize o número de pessoas que irão interagir com os participantes.
  • Se houver observadores na sala, limite-os a dois ou três.
  • Tenham uma lista de verificação:
    • Horários para realizar tarefas.
    • Erros cometidos na execução de tarefas.
    • Ações inesperadas do usuário.
    • Recursos do sistema usados/não usados.
    • Recursos difíceis/fáceis de usar.
    • Bugs ou falhas do sistema.
  • Registre as técnicas e os padrões que os participantes empregam ao tentar resolver uma dificuldade.
  • Se os participantes estiverem pensando em voz alta, registre as suposições e inferências feitas.
  • Grave a sessão com um gravador, uma câmera de vídeo ou de acordo com a tecnologia acessível.
  • Não interrompa os participantes a menos que seja absolutamente necessário.
  • Se os participantes precisarem de ajuda, forneça alguma resposta:
    • Forneça incentivos ou dicas.
    • Dê dicas gerais antes de dicas específicas.
    • Registre o número de dicas fornecidas.
  • Observe cuidadosamente os sinais de estresse nos participantes:
    • Ficar sentado por muito tempo sem fazer nada.
    • Culpar-se pelos problemas.
    • Folhear a documentação sem realmente lê-la.
  • Faça pausas curtas quando necessário.
  • Mantenha uma atitude positiva, aconteça o que acontecer.
• Após o teste
  • Faça uma entrevista pós-sessão com os participantes.
  • Considere o uso de um questionário para coletar dados da entrevista.
  • Conte aos participantes o que foi aprendido no teste.
  • Forneça um questionário de acompanhamento que peça aos participantes para avaliar o sistema ou as tarefas realizadas, se necessário.
  • Se estiver gravando, use as gravações apenas da maneira adequada.
  • Respeite a privacidade dos participantes.
  • Obtenha permissão por escrito para usar os dados coletados.

Exemplos de mensuração da Usabilidade:

• Tempo para completar uma tarefa
• % da tarefa concluída
• % da tarefa completada por unidade de tempo
• Relação de sucessos com fracassos
• Tempo gasto em erros
• % ou número de erros
• % ou número de concorrentes melhores do que isso
• Número de comandos utilizados
• Frequência de ajuda e utilização de documentação
• % de comentários favoráveis/desfavoráveis dos usuários
• Número de repetições de comandos com falha
• Número de execuções de sucessos e de fracassos
• Número de vezes que a interface induz o usuário em erro
• Número de recursos bons e ruins lembrados pelos usuários
• Número de comandos disponíveis não utilizados
• Número de comportamentos regressivos
• Número de usuários que preferem seu sistema
• Número de vezes que os usuários precisam solucionar um problema
• Número de vezes que o usuário é interrompido por uma tarefa de trabalho
• Número de vezes que o usuário perde o controle do sistema
• Número de vezes que o usuário expressa frustração ou satisfação

Links úteis:
https://www.nngroup.com/articles/usability-testing-101
https://www.usability.gov/how-to-and-tools/methods/usability-testing.html
http://usability.jameshom.com
https://www.usabilityfirst.com/usability-methods
https://www.interaction-design.org/literature/book/the-encyclopedia-of-human-computer-interaction-2nd-ed/usability-evaluation