Mini-seminários da disciplina de Teste Formal de Usabilidade, Pós-graduação em Ergodesign de Interfaces da PUC-Rio / Laboratório de Ergonomia e Usabilidade de Interfaces / LEUI. Prof. Luiz Agner, 2010.

1. Capítulo 8 - Preparando Materiais do Teste Introdução Neste capítulo estudaremos a lista de materias mais comuns que você precisa para desenvolver um teste e considerações sobre como preparar-se para testar um protótipo ou um produto imcompleto . A preparação do material para o teste requer a criação de todos os documentos necessários bem antes do tempo que você irá precisar deles , afim de facilitar o fluxo natural do teste e permitindo que você se foque no que realmente importa: o comportamento do usuário . Caso tenha dificuldade em desenvolver algum dos materiais que serão citados, é sinal e que há falhas em seus objetivos no teste.

4. Capítulo 8 - Preparando Materiais do Teste Roteiro de introdução Se trata de um documento que deve ser lido na íntegra para os participantes . Descreve o que acontecerá durante o teste e define os objetivos o teste para os participantes. Tem como objetivo deixar os participantes à vontade , reforçando a idéia de que é o produto que está sendo testado e não o participante . O roteiro de introdução auxilia muito os participantes mais nervosos pois introduz a idéia de que eles são as pessoas certas no lugar certo. O documento deve ser lido para os participantes na área de testes, sala de espera ou sala de reunião antes de se mudar para o local exato o teste.

16. Capítulo 8 - Preparando Materiais do Teste Ferramentas de coleta de dados (continuação) Revendo as questões de pesquisa descritas no plano de teste: Se após rever as questões você continua com dúvidas sobre qual tipo de dados coletar, isso significa que você precisa esclarecer o objetivo da pesquisa para torná-la mais específica , entrevistando novamente os projetistas e desenvolvedores sobre as questões a serem pesquisadas no teste . Decida que tipo de infomação coletar: Combine os tipos de dados que você vai coletar sobre um problema infomado no planejamento do teste. Questão de investigação Dados coletados Quão acessível é a informação na seção "Fale conosco" Tempo decorrido entre a busca objeto em questão e a sua localização na tela.

22. Capítulo 8 - Preparando Materiais do Teste Descobrindo Atitudes e primeiras impressões Procura determinar atitudes e primeiras impressões do participante sobre a facilidade de uso de um produto antes dele efetivamente usá-lo. Essa impressão inicial pode ser um elemento vital no teste de usabilidade. O produto parece fácil de usar? O participante entende a terminologia? O produto é similar ou muito diferente de outros produtos ou até mesmo de outras versões deste produto?

23. Capítulo 8 - Preparando Materiais do Teste Descobrindo Atitudes e primeiras impressões Impressões iniciais preparam o terreno para o uso efetivo do produto, e ajudam a entender os sentimentos do participante e expectativas antes do uso . Se o produto PARECE ser difícil , isso já cria um obstáculo. Por outro lado, se PARECE simples ou intuitivo, isso se torna uma vantagem, e o usuário tenderá a usá-lo e explorá-lo por mais tempo e até com mais boa vontade. Como é feito: o Moderador mostra ao usuário uma tela, um painel de controle ou conteúdo de um manual e pedirá para ele dar uma nota relativa à facilidade de uso do ítem em questão.

24. Capítulo 8 - Preparando Materiais do Teste Descobrindo Atitudes e primeiras impressões Esse tipo de teste pode ser expandido posteriormente. Isso é feito aplicando o mesmo questionário pré-teste APÓS o teste de usabilidade. As notas do usuário aumentarão ou diminuirão? O uso efetivo do produto modificou ou não as primeiras impressões do usuário? A imagem que ele tinha do produto melhorou ou piorou após o o uso efetivo?

25. Capítulo 8 - Preparando Materiais do Teste Descobrindo Atitudes e primeiras impressões Testando elementos e terminologia - com o mesmo método, é possível testar elementos do produto que devem ter seu significado evidente antes mesmo do produto ser utilizado. Por exemplo: símbolos e ícones, rótulos da navegação de um site, etc. É possível descobrir se os usuários estão reconhecendo automaticamente esses elementos. E, se não estiverem, se os compreenderam após usar o produto. Antes ou durante a aplicação desse pré-teste deixe o usuário ver o produto, para que ele entenda o contexto dos termos ou símbolos . Mas não o deixe utilizar o produto.

26. Capítulo 8 - Preparando Materiais do Teste Qual o valor do produto para o usuário? Outra aplicação é saber a opinião do usuário sobre a utilidade ou o valor do produto. Aqui não se quer medir a usabilidade , mas sim o valor inerente do produto , antes mesmo de se considerar as questões de usabilidade. Isso é de fundamental importância , pois considerar apenas aspectos de usabilidade num produto, e não seu valor inerente ou a sua utilidade para o usuário, é um erro. Se usuários perceberem que um produto lhe traz benefícios, até se dispõem a enfrentar problemas de usabilidade que o mesmo possa ter. Mas se eles não têm interesse num produto, o contrário pode não acontecer.

27. Capítulo 8 - Preparando Materiais do Teste Classificando usuários para diferentes grupos de teste Além de fazer um questionário ou entrevista de "background" com usuários para determinar seu nível de conhecimento, existem outras técnicas que podem ser aplicadas: * Os usuários estimam a frequência com que têm contato com os itens de uma lista . Os usuários com maior frequência são considerados os experts e os com menos, os novatos. * Participantes dão nota, de 0 a 5, para a sua expertise em várias funções. Aí, o moderador, baseado no que entende da aplicação, cria linhas de corte arbitrárias, dividindo participantes em categorias. EXEMPLO: de 0 a 5 - inciante, de 06 a 15 - Intermediário, de 16 a 20 - expert

28. Capítulo 8 - Preparando Materiais do Teste Produtos e Protótipos para teste * Tenha o objeto que será testado em mãos o mais cedo possível , mesmo que seja um protótipo inicial. * Torne-se familiar com o objeto antes até do primeiro teste piloto ou pré-teste . Você terá uma idéia melhor do que esperar quando os participantes o testarem. Onde poderão ter dificuldades, onde poderão ter mais dúvidas e questões, o que já está funcional ou não no protótipo. * Use o protótipo para construir cenários de tarefas ("Task Scenarios") . Documente os passos "corretos" para a finalização de cada tarefa para compará-los com a performance dos usuários.

29. Capítulo 8 - Preparando Materiais do Teste Cenários da tarefa (Task Scenarios) São representações da performance que os usuários teoricamente terão (ou deveriam ter) usando o seu produto. São versões expandidas da lista de tarefas original, com contexto e as razões e motivações do participante. Geralmente, compreende várias tarefas da lista original agrupadas, pois é desta forma que as pessoas realizam um trabalho. O Cenário de teste deve descrever: O resultado que o usuário deve atingir; Os motivos que o levariam a realizar a tarefa; Dados e nomes efetivos, e não generalidades; O estado do sistema quando a tarefa é iniciada; Descrições de imagens e mostruários que os participantes verão durante a tarefa.

30. Capítulo 8 - Preparando Materiais do Teste Cenários da tarefa (Task Scenarios) Os cenários da tarefa podem ser lidos ou distribuídos para os usuários. Mas não deve repetir exatamente os termos usados no produto, para não guiar ou facilitar as tarefas. Dicas: Crie cenários realistas, completos, com motivações para uso; Sequencie os cenários em ordem; Regule os cenários com a experiência dos participantes; Evite jargões e termos que possam "entregar" a tarefa; Coloque uma quantidade substancial de trabalho em cada cenário;

31. Capítulo 8 - Preparando Materiais do Teste Treinamento opcional Em alguns casos é necessário um treinamento do usuário antes do teste de usabilidade, para atendar algum critério específico do teste. Pode ir desde uma descrição de 10 minutos do produto até um workshop de dois dias. Isso pode ser utilizado em algumas situações: Garantir expertise mínima dos usuários; Testar usuários "experientes" num produto que é novo; Testar apenas as funcionalidades para usuários avançados de um produto; Quais os benefícios de um treinamento? * Testar mais a facilidade de uso e não apenas facilidade de aprendizado ; * Testar funcionalidades avançadas que não seriam abordadas nos testes; * Ao observar um treinamento, desenvolvedores percebem os obstáculos que um novato terá ao aprender o seu produto;

32. Capítulo 8 - Preparando Materiais do Teste Questionário Pós-teste Serve para coletar informações de preferência do participante para esclarecer e aprofundar o entedimento dos pontos fortes e fracos do produto. Geralmente as informações incluem opniões e sentimentos sobre a facilidade de uso e aprendizado do produto. Nos escritos, perguntas devem ser feitas da mesma exata maneira para todos os participantes. Nos orais, perguntas podem ser ajustadas de acordo com o indivíduo ou com o que ocorreu na sua sessão de teste em particular. Duas principais considerações de um questionário são Conteúdo e Formato . Conteúdo - assuntos e tópicos que você quer abordar nas perguntas. Formato - desenho e redação das questões e seu ordenamento no questionário.

33. Capítulo 8 - Preparando Materiais do Teste Questionário Pós-teste Dicas: Seu questionário só deve conter o que você PRECISA que o usuário responda; Em testes longos (mais de 1h), distribua um questionário menor ao fim de cada tarefa e não um questionário grande ao fim de tudo; Pergunte sobre aquilo que não pode ser pesquisado na observação do teste, questões subjetivas; Foque nas áreas e tópicos que você quer cobrir no teste.

34. Capítulo 8 - Preparando Materiais do Teste Questionário Pós-teste Dicas (continuação) : Faça com que o teste tenha perguntas e respostas breves e simples . Evite questões "abertas" que favoreçam os usuários que escrevem melhor; Use o piloto para refinar o questionário. O piloto pode lhe fornecer Idéias para novas perguntas, identificar questões supérfluas e se o questionário está muito longo ou curto. O Questionário piloto deve coincidir com o teste piloto;

35. Capítulo 8 - Preparando Materiais do Teste "Guia de Debriefing" Se refere ao ato de explorar e analisar as ações do participante. No debriefing deve-se apresentar os resultados da rodada realizada, explicar como cada participante, ou grupo participante alcançou os resultados, e, então, realizar uma conexão entre a experiência vivenciada e o mundo real. Diferentemente do questionário, onde se lista questões específicas que serão perguntadas ao participante,os tópicos do guia de "debriefing" são de assuntos que o pesquisador quer discutir. É uma linha de questões que podem ser feitas ou não dependendo do andamento de cada teste.