Capítulo 3 — Desenho do estudo, ética e reprodutibilidade

Mapa da aula

Aula 03 publicada. Mapa, exemplo, EX015.

flowchart TD
  N0["3.1 Métodos mistos"]
  N1["3.2 Aprovação ética"]
  N2["3.3 Riscos do autorrelato"]
  N3["3.4 Plano de reprodutibilidade"]
  N4["Síntese"]
  N0 --> N1 --> N2 --> N3 --> N4
  N4 --> EX["Exemplo resolvido"]
  EX --> Q["Exercício EX015"]

Desenho lógico

flowchart LR
  N0["3.1 Métodos mistos"]
  N1["3.2 Aprovação ética"]
  N2["3.3 Riscos do autorrelato"]
  N3["3.4 Plano de reprodutibilidade"]
  N4["Síntese"]
  N0 --> N1 --> N2 --> N3 --> N4 --> Q["EX015"]

[3.1 Métodos mistos]
    |
    v
[3.2 Aprovação ética]
    |
    v
[3.3 Riscos do autorrelato]
    |
    v
[3.4 Plano de reprodutibilidade]
    |
    v
[Síntese]
    |
    v
[Exemplo resolvido] --> [Exercício EX015]

Objetivos de aprendizagem

Você vai (1) desenhar um estudo de métodos mistos sobre uma mudança de política; (2) obter aprovação ética para pesquisa com funcionários; (3) planejar a reprodutibilidade.

3.1 Métodos mistos

Sofia desenha um estudo em três partes. Primeiro, analisa as contagens mensais de redefinições de senha no service desk ao longo de dezoito meses antes e doze meses depois da mudança de política, uma série temporal interrompida que verifica se o nível ou a tendência mudaram. Segundo, aplica aos funcionários um questionário sobre hábitos de senha, incluindo reutilização e anotação de senhas, com perguntas anônimas. Terceiro, entrevista doze funcionários de funções diferentes sobre como a mudança afetou seu trabalho. Combinar contagens, respostas de questionário e entrevistas permite que cada método cubra as fraquezas dos outros.

3.2 Aprovação ética

Sofia submete o projeto ao comitê de ética do Harrowgate e ao escritório de pesquisa do hospital. O questionário não coleta nomes nem faz perguntas sobre senhas reais; pergunta apenas sobre hábitos. Os entrevistados dão consentimento por escrito, podem desistir e são citados apenas pela função. Os dados do service desk são fornecidos como contagens mensais, sem nenhum nome. O comitê pede que ela evite recrutar para as entrevistas seus próprios colegas diretos, porque eles poderiam se sentir incapazes de recusar. Ela concorda e recruta por meio de um aviso neutro. Todos os termos de consentimento ficam guardados com segurança no Harrowgate.

3.3 Riscos do autorrelato

Perguntar aos funcionários se reutilizam senhas convida a respostas socialmente desejáveis. Sofia usa uma redação que normaliza o comportamento, por exemplo lembrando que muitas pessoas reutilizam senhas por conveniência, e pergunta sobre frequência em vez de pedir sim ou não. Mantém o questionário anônimo e evita qualquer vínculo com contas individuais. Mesmo assim, espera que a reutilização seja sub-relatada e planeja comparar as respostas de antes e depois, em vez de tratar o nível absoluto como exato. Conhecer o viés de uma medida permite interpretá-la com bom senso. Ela explica essa escolha no capítulo de métodos.

3.4 Plano de reprodutibilidade

Sofia escreve um plano de análise antes de ver os dados posteriores à mudança. Guarda o código, o questionário, o roteiro de entrevista e os dados anonimizados em um repositório versionado. As transcrições das entrevistas não são compartilhadas, porque poderiam identificar funcionários; em vez delas, ela compartilha seu esquema de codificação e as contagens. O Dr. Nakamura lembra que reprodutibilidade em pesquisa com pessoas significa compartilhar tudo o que pode ser compartilhado com segurança e explicar com clareza o que não pode e por quê, em vez de não compartilhar nada ou de pôr em risco a privacidade dos participantes. Ela lista os itens compartilhados em uma declaração de dados curta.

Exemplo resolvido

Sofia desenha um estudo com série temporal, questionário e entrevistas, obtém aprovação com salvaguardas, reduz o viés de autorrelato e escreve um plano de reprodutibilidade.

Caso sintético. O estudo e os comitês são sintéticos.

Erros e limites

Séries temporais interrompidas podem ser confundidas por outras mudanças simultâneas. Questionários sub-relatam hábitos sensíveis.

Exercícios

• EX015 — Três partes. Quais são as três partes do estudo de Sofia?
  Mostrar critérios de avaliação

  Rubrica: 3 = série temporal das redefinições, questionário anônimo e entrevistas;; 2 = duas;; 1 = vago;; 0 = nenhuma.
• EX016 — Limites do questionário. O que o questionário não pergunta?
  Mostrar critérios de avaliação

  Rubrica: 3 = nomes ou senhas reais;; 2 = senhas;; 1 = vago;; 0 = nenhuma.
• EX017 — Recrutar colegas. Por que evitar recrutar colegas diretos?
  Mostrar critérios de avaliação

  Rubrica: 3 = poderiam se sentir incapazes de recusar;; 2 = pressão;; 1 = vago;; 0 = nenhuma.
• EX018 — Redação que normaliza. Como Sofia reduz as respostas socialmente desejáveis?
  Mostrar critérios de avaliação

  Rubrica: 3 = redação que normaliza a reutilização e pergunta a frequência;; 2 = redação;; 1 = vago;; 0 = nenhuma.
• EX019 — Comparar níveis. Por que comparar antes e depois em vez de confiar nos níveis absolutos?
  Mostrar critérios de avaliação

  Rubrica: 3 = a reutilização tende a ser sub-relatada de forma consistente;; 2 = relativo;; 1 = absoluto;; 0 = nenhuma.
• EX020 — Transcrições não compartilhadas. O que é compartilhado no lugar das transcrições das entrevistas?
  Mostrar critérios de avaliação

  Rubrica: 3 = o esquema de codificação e as contagens;; 2 = esquema de codificação;; 1 = transcrições;; 0 = nenhuma.

Síntese

Métodos mistos, com ética cuidadosa e um plano de reprodutibilidade honesto, são adequados à pesquisa sobre o comportamento de segurança da equipe.