Capítulo 25 — Laboratório I

Mapa da aula

Aula 25 publicada. Mapa, exemplo, EX073.

flowchart TD
  N0["25.1 Planejar o teste"]
  N1["25.2 Medir"]
  N2["Laboratório — Tempo da tarefa: encaminhamento versus"]
  N3["25.3 Relatar os resultados"]
  N4["Síntese"]
  N0 --> N1 --> N2 --> N3 --> N4
  N4 --> EX["Exemplo resolvido"]
  EX --> Q["Exercício EX073"]

Desenho lógico

flowchart LR
  N0["25.1 Planejar o teste"]
  N1["25.2 Medir"]
  N2["Laboratório — Tempo da tarefa: encaminhamento versus"]
  N3["25.3 Relatar os resultados"]
  N4["Síntese"]
  N0 --> N1 --> N2 --> N3 --> N4 --> Q["EX073"]

[25.1 Planejar o teste]
    |
    v
[25.2 Medir]
    |
    v
[Laboratório — Tempo da tarefa: encaminhamento versus]
    |
    v
[25.3 Relatar os resultados]
    |
    v
[Síntese]
    |
    v
[Exemplo resolvido] --> [Exercício EX073]

Objetivos de aprendizagem

Você vai (1) conduzir um teste controlado do botão de reporte com voluntários; (2) medir o tempo e o sucesso da tarefa; (3) relatar os resultados com seus limites.

25.1 Planejar o teste

No primeiro laboratório, Nadia testa o botão de reporte com dez funcionários voluntários, usando uma caixa postal de teste cheia de e-mails sintéticos. Nenhuma caixa de entrada real é usada, e os voluntários sabem que se trata de um teste do botão, e não deles. Pede-se a cada voluntário que reporte dois e-mails suspeitos, uma vez encaminhando-o para o endereço e outra com o botão. Ela registra o tempo da tarefa e se o reporte deu certo. O plano tem aprovação ética, e os voluntários podem parar a qualquer momento. Cada sessão leva dez minutos.

25.2 Medir

O laboratório compara os tempos da tarefa. O encaminhamento leva cerca de quarenta segundos em média, porque as pessoas precisam encontrar o endereço e acrescentar uma nota. O botão leva cerca de seis segundos. Os dez voluntários conseguem com o botão; dois não conseguem encaminhar corretamente porque digitam o endereço errado. Nadia também pede aos voluntários que avaliem a facilidade numa escala de cinco pontos. As avaliações favorecem fortemente o botão. O teste mostra que uma pequena mudança de design elimina boa parte do esforço que desestimulava o reporte. Ela registra cada tempo numa tabela.

Laboratório — Tempo da tarefa: encaminhamento versus botão

# Task times in seconds for ten volunteers (synthetic).
fwd = [35, 42, 38, 51, 33, 44, 39, 36, 47, 35]
btn = [5, 7, 6, 6, 5, 8, 6, 5, 7, 5]
print(f"forwarding mean {sum(fwd) / 10:.0f} s; button mean {sum(btn) / 10:.0f} s; saving {sum(fwd) / 10 - sum(btn) / 10:.0f} s")

Execute com python3 lab_button.py. Saída verificada:

forwarding mean 40 s; button mean 6 s; saving 34 s

25.3 Relatar os resultados

Nadia relata os resultados numa nota curta, com uma tabela de tempos e taxas de sucesso. Acrescenta os limites: os voluntários podem ser mais confiantes do que os funcionários típicos; o teste usou um computador de mesa, e não celulares; e dez pessoas são uma amostra pequena. Ela recomenda implantar o botão e depois conferir os tempos reais de reporte. Declarar os limites com honestidade torna os gestores mais propensos a confiar no resultado, porque eles conseguem ver o que ele mostra e o que não mostra. Os gestores aceitam a nota.

Exemplo resolvido

Nadia testa um botão de reporte com dez voluntários numa caixa postal de teste, encontra uma grande economia de tempo e relata os limites.

Caso sintético. O teste é sintético.

Erros e limites

Os voluntários não são típicos. As condições do laboratório diferem das de um balcão movimentado.

Exercícios

• EX073 — Caixa postal de teste. Por que usar uma caixa postal de teste?
  Mostrar critérios de avaliação

  Rubrica: 3 = para que nenhuma caixa de entrada real seja envolvida;; 2 = controlado;; 1 = vago;; 0 = nenhuma.
• EX074 — Tempos médios. Quais foram os tempos médios do encaminhamento e do botão?
  Mostrar critérios de avaliação

  Rubrica: 3 = 40 e 6 segundos;; 2 = 34 segundos economizados;; 1 = vago;; 0 = nenhuma.
• EX075 — Falhas de encaminhamento. Quantos voluntários não conseguiram encaminhar corretamente?
  Mostrar critérios de avaliação

  Rubrica: 3 = dois;; 2 = 2;; 1 = vago;; 0 = nenhuma.

Síntese

Testes de usabilidade contidos mostram o efeito de pequenas mudanças de desenho e os seus limites.