Exemplo de planejamento e roteiro de teste de usabilidade

Foto: archie4oz, disponível em https://flic.kr/p/eavAc

Este é um exemplo de um roteiro de teste de usabilidade. Estou disponbilizando aqui no Medium pois muitos colegas e alunos já me perguntaram sobre o tema e pediram acesso ao modelo. Quem tiver alguma dúvida, crítica ou sugestão, por favor deixe um comentário.

1 Objetivos

O que queremos aprender? Quais as preocupações, questões e objetivos do teste? Por quê?

• Detectar problemas no fluxo das tarefas do novo wizard;
• Entender qual a percepção dos participantes sobre os novos modelos;
• Verificar a compreensão dos participantes sobre as ações em lote do para configuração dos hosts e serviços;
• Avaliar a satisfação dos usuários sobre a proposta;

2 Participantes

Quem será recrutado e por quê? Por quem serão recrutados?

2.1 Lista de recrutamento

Pilotos (Internos)

• Júlio
• Danilo
• Guilherme
• Marcos
• Ana

Clientes

• Márcio — Empresa — telefone
• Diogo — Empresa — telefone
• Filipe — Empresa — telefone
• Lahor — Empresa — telefone

Parceiros comerciais

• Bruno — Empresa — telefone
• Marcelo — Empresa — telefone
• Rafael — Empresa — telefone
• Bruno — Empresa — telefone
• Herbert — Empresa — telefone

2.2 Participantes confirmados

Pilotos

• Júlio
• Ana
• Guilherme

Clientes

• Márcio — Empresa — telefone
• Diogo — Empresa — telefone

3 Processo

O que e como faremos?

3.1 Processo

Para a execução dos testes será montado um ambiente acessível via web com o protótipo Wizard de Configuração.

O participante será convidado previamente via telefone ou pessoalmente, onde será explicada a atividade e marcado o teste. Após, receberá um e-mail de confirmação da data/hora e um link para um questionário prévio, com finalidade de capturar o seu perfil de uso.

No dia/hora do teste o participante será contatado via Skype e receberá o roteiro de atividades. Para o teste será requisitado que compartilhe sua tela e fale em voz alta o que está pensando quando executa as ações.

3.2 Ligação de recrutamento

Oi [nome do participante]. Augusto da [empresa]. Tudo bom? Teria 5 minutos para conversar?

Estamos testando o novo sistema de modelos de monitoração no [sistema] e gostaríamos de convidá-lo para participar do teste de uso deste novo sistema.

O teste será feito remoto, via Skype, com data e horário combinados, conforme a sua possibilidade, e levará no máximo meia hora. Já participou de algum teste de usabilidade?

[participante responde sim]: Deve ser muito parecido com o que você participou.

São somente algumas tarefas que vão ser passadas para que tu realize no ambiente com o protótipo, todas relacionadas à configuração e adição de elementos no [sistema].

Os dados coletados servirão para aperfeiçoar a versão até a data de lançamento e para melhorias nas futuras versões.

Posso contar com a sua participação?

Você teria uma estação com skype, som e microfone? Não é necessário vídeo.

Que dia e horário é melhor pra você? Vou enviar um e-mail de confirmação. Qual seu e-mail?

Se tiver qualquer dúvida, pode entrar em contato comigo pelo telefone [telefone] ou pelo e-mail [e-mail]

3.3 E-mail de confirmação

Olá [nome do participante],

Tudo bom?

Conforme conversamos por telefone, nossa conferência via Skype para teste de uso do novo sistema de modelos de monitoração do [sistema] será no dia [99/99], às [99h].

Algumas instruções prévias:

• Verifique se é possível você utilizar o Skype. Se você nunca utilizou o Skype, pode baixá-lo aqui: http://www.skype.com/pt-br/download-skype/. É necessário que faça isso em um desktop ou notebook.
• Caso não seja possível utilizar o Skype na sua empresa, avise-me para ver que alternativas podemos utilizar;
• Por favor, leia com cuidado termo o termo de consentimento da pesquisa nesse link: [link]. Coloque seu nome completo, e-mail e RG nos campos disponíveis e submeta; se possuir qualquer dúvida ou questionamento, entre em contato comigo;
• Preciso que você responda esse questionário pré-teste. São somente 5 questões rápidas: [link] ;
• Se for necessário trocar a data/hora de nossa webconferência, me avise que alteramos a agenda;

Qualquer dúvida, estou à disposição.

Desde já, obrigado por aceitar participar do nosso teste de uso.

Att.

Augusto Rückert

3.4 Questionário pré-teste

Ver formulário no google drive

3.5 Termo de Sigilo e Consentimento Livre e Esclarecido

Ver formulário no google drive

3.6 E-mail de lembrete

Olá [nome do participante],

Tudo bom?

A nossa conferência via Skype para o teste de uso do novo sistema de modelos de monitoração do [sistema] começa em 15 minutos.

Algumas instruções

• Verifique se você respondeu o questionário pré-teste. Se não o fez, segue o link:
• [link]
• Verifique se você leu e preencheu o Termo de Sigilo e Consentimento Livre e Esclarecido da pesquisa. Se não o fez, segue o link: [link]
• Adicione o contato [nome do usuário] no seu Skype

Se precisar de ajuda, contate-me: [telefone] ou augusto.ruckert@[empresa].com.br

Até lá.

Att.
Augusto Rückert

3.7 Roteiro do teste

Roteiro versão 2

Olá e muito obrigado por aceitar participar do Teste de Usabilidade novo sistema de modelos de monitoração do [sistema]. Suas contribuições serão muito importantes para o aperfeiçoamento do produto, para assim entendermos melhor o que funciona e o que não serve, aperfeiçoando a solução.

POR FAVOR, LEIA ESTE ROTEIRO COM CUIDADO E ATENÇÃO

Após a leitura você pode sanar todas as suas dúvidas com o moderador. Porém, após o início da atividade, nenhuma pergunta será respondida, pois as dificuldades com que você compreende as tarefas e as interfaces é parte do que estamos avaliando no produto e no procedimento de teste.

Importante frisar que o sistema que está em teste, NÃO você. Não hesite em executar as tarefas da maneira que entendeu no enunciado e na interface.

Caso ocorra algum problema técnico no funcionamento do software, não se preocupe. A equipe de apoio lidará com a situação, suspendendo a atividade até o restabelecimento da condição de teste. Se necessário, o teste será remarcado conforme a sua disponibilidade.

Sua tela é o centro da conferência. Por isso pedimos que compartilhe sua tela através do botão Compartilhar Tela do Skype. Se não souber como fazer isso, peça ajuda ao moderador.

Muito importante!

Durante a atividade:

• Execute uma tarefa por vez, na ordem apresentada;
• Pedimos que fale em voz alta o que está pensando ou o motivo de estar executando cada ação. Caso o resultado não seja o esperado, fale o que esperava que acontecesse;
• Não espere respostas do moderador para suas indagações durante as tarefas;
• Quando finalizar uma tarefa, avise o moderador que considera a tarefa concluída;
• Se estiver com dificuldade na realização da tarefa pedida, você pode desistir a qualquer momento. Avise o moderador, informando o motivo, e prossiga para a próxima tarefa;
• Ao final de cada tarefa, finalizada ou não, o moderador e os observadores poderão fazer algumas perguntas sobre o processo, ações tomadas e escolhas que você fez durante a execução.

Acesso ao ambiente

ip: 192.168.10.156

usuário: abc

senha: 123

Atividade 01: Você adicionou na sua rede um switch enterasys. Adicione ele na monitoração

• O ip do host é 192.168.10.1
• As autenticações são usuário: [usuário], senha: [senha]
• Monitore todos os serviços recomendados

Atividade 02: Você adicionou na sua rede um roteador cisco. Além de monitorar seu status, você gostaria de monitorar também a temperatura do equipamento. Adicione ele na monitoração

• O ip do host é 192.168.10.2
• As autenticações são usuário: [usuário], senha: [senha]
• Monitore todos os serviços recomendados

Atividade 03: Você deseja adicionar sua aplicação de Google Apps na monitoração. Precisa monitorar estado e latência. A aplicação está acessível no ip 192.168.10.3

• O ip do host é 192.168.10.3
• As autenticações são usuário: [usuário], senha: [senha]
• Monitore todos os serviços recomendados

Atividade 04: Você deseja adicionar o host 192.168.10.4 com um VmWare server, porém sem nenhum serviço.

• O ip do host é 192.168.10.4
• As autenticações são usuário: [usuário], senha: [senha]
• Coloque o host na monitoração sem nenhum serviço

Faça uma atividade por vez, na sequência indicada, expressando o que está pensando em voz alta e avise o moderador cada vez que finalizar uma tarefa.

LEMBRE-SE: Quem está sendo testado é a aplicação, não você.

Novamente agradecemos pela sua participação.

Equipe da [empresa]

3.8 Email de envio do roteiro do teste

Oi [nome do participante], tudo bom?
Segue anexado ao e-mail o roteiro do teste.
Peço que leia com atenção e, antes de iniciar o teste, me contate no skype.

Att.
Augusto Rückert

[anexar arquivo]

3.9 Questionário de encerramento

SUS (System Usability Scale) + Avaliação do teste de usabilidade + Perguntas abertas

Ver formulário no google drive

3.10 Email do questionário de avaliação da atividade

Oi [nome do participante],

Novamente agradeço por ter participado do Teste de Uso novo sistema de modelos de monitoração do [sistema]. Espero que tenha gostado.

Queremos melhorar os próximos testes, por isso peço que tu responda a esse questionário de encerramento, para avaliação da atividade: [link]

Qualquer dúvida, sugestão ou crítica, me contate por favor.

Att.

3.11 Roteiro do Moderador

Enunciado:

Bom [dia / tarde] [nome do participante]. Tudo bom?

Obrigado por comparecer ao Teste de Usabilidade. Serei o moderador do teste, portanto eu irei passar coordenar a sessão, [apresentar os observadores]. Vou te enviar por e-mail o roteiro e link do ambiente de teste. Peço que tu leia tudo e questione o que achar necessário. Para cada tarefa você que dará o início e fim. Após cada tarefa posso ter algumas dúvidas das tuas motivações, então não estranhe se perguntar os porquês de cada ação. Nossa sessão durará por volta de 30 minutos.

Ao final de algumas tarefas:

• Perguntar como está sendo a atividade

Modelos de perguntas para o final de tarefa:

• Você poderia falar mais sobre [ação]?
• O que você esperava como resultado quando executou [ação]?
• O que você estava pensando quando executou [ação]?
• O que isso significa para você?
• O que você faria em seguida?
• O que você vê neste [parte da interface]?
• O que deveria acontecer em seguida?
• Você localiza algo na tela que poderia ajudá-lo(a)?
• O que você imagina que esse link faz? E esse outro?

Perguntar se os observadores gostariam de questionar algo.

Ao final do teste:

Novamente, muito obrigado pela participação [nome do participante]. Estou lhe enviando o link para o questionário final de avaliação da atividade: [link]

4 Cronograma

Quando os testes serão realizados

Piloto:

• 1a bateria: Quarta feira, dia 16/09, 13h30 às 16h — 4 participantes
• 2a bateria: Sexta feira, dia 18/09, 13h30 às 16h — 2 participantes

Clientes

• Bateria única: Segunda feira, 21/09, 13h30 às 18h30 — 5 participantes

Parceiros

• Bateria extra: Terça, 22/09, 11h30 às 12h00 — 1 participante

5 Planejamento de atividades

Listagem completa do que cada participante fará no teste

// Parte A: Enfoque: Adição/Configuração de novos itens através da status grid

Atividade 01
Objetivo: Verificar se o fluxo principal está funcionando

Enunciado: Você adicionou na sua rede um switch enterasys. Adicione ele na monitoração
Detalhes:

• O ip é 192.168.10.7
• As autenticações são usuário: usuário, senha: senha
• Monitore todos os serviços recomendados

Atividade 02
Objetivo: Verificar se o usuário consegue entender que há informações na descrição do modelo

Enunciado: Você adicionou na sua rede um roteador cisco. Além de monitorar seu status, você gostaria de monitorar também a temperatura do equipamento. Adicione ele na monitoração

Detalhes:

• O ip é 192.168.10.7
• As autenticações são usuário: usuário, senha: senha
• Monitore todos os serviços recomendados

Atividade 03
Objetivos: Verificar se o usuário consegue entender a inclusão de novos elementos utilizando dois ou mais modelos / Verificar se o usuário consegue entender como adicionar o host não descoberto

Enunciado: Você deseja adicionar sua aplicação de Google Apps na monitoração

Detalhes:

• O ip é 192.168.10.7
• As autenticações são usuário: usuário, senha: senha
• Monitore todos os serviços recomendados

Atividade 04
Objetivo: Verificar se o usuário entende como adicionar elemento na monitoração sem serviços

Enunciado: Você deseja adicionar o host 192.168.10.3 com um VmWare server, porém sem nenhum serviço.

Detalhes:

• O ip é 192.168.10.7
• As autenticações são usuário: usuário, senha: senha
• Monitore todos os serviços recomendados

Gostou do post? Clica no ❤ abaixo para recomendar a leitura para outras pessoas.