Capítulo 3 — Proposta de contribuição original
Mapa da aula
Aula 03 publicada. Mapa, exemplo, EX015.
flowchart TD
N0["3.1 O desenho"]
N1["3.2 Desfechos e amostra"]
N2["3.3 Riscos éticos e práticos"]
N3["3.4 Revisão pela banca"]
N4["Síntese"]
N0 --> N1 --> N2 --> N3 --> N4
N4 --> EX["Exemplo resolvido"]
EX --> Q["Exercício EX015"]
Desenho lógico
flowchart LR
N0["3.1 O desenho"]
N1["3.2 Desfechos e amostra"]
N2["3.3 Riscos éticos e práticos"]
N3["3.4 Revisão pela banca"]
N4["Síntese"]
N0 --> N1 --> N2 --> N3 --> N4 --> Q["EX015"]
[3.1 O desenho]
|
v
[3.2 Desfechos e amostra]
|
v
[3.3 Riscos éticos e práticos]
|
v
[3.4 Revisão pela banca]
|
v
[Síntese]
|
v
[Exemplo resolvido] --> [Exercício EX015]
Objetivos de aprendizagem
Você vai (1) escrever uma proposta de doutorado com desenho escalonado; (2) justificar o tamanho da amostra; (3) antecipar riscos éticos e práticos.
3.1 O desenho
Mireille propõe uma implantação escalonada nos doze departamentos da Vantor. Todos os departamentos começam no programa atual. A cada dois meses, três departamentos sorteados passam para o programa centrado em reportes: um botão de reporte com um clique, um agradecimento automático em poucos minutos, um resumo semanal mostrando o que os e-mails reportados eram de fato e simulações mensais curtas com dificuldade fixa na Phish Scale. Sortear a ordem de mudança permite comparar os departamentos antes e depois, controlando as variações sazonais das ameaças por e-mail que atingem todos ao mesmo tempo.
3.2 Desfechos e amostra
O desfecho primário é a proporção de e-mails suspeitos reais reportados por pelo menos um destinatário em até trinta minutos, codificados como no capítulo 1. Os desfechos secundários são as taxas de reporte nas simulações, as taxas de cliques nas simulações e o ônus percebido pelos servidores, medido em um questionário curto. Como o sorteio é feito por departamento, e não por pessoa, ela leva em conta o agrupamento: servidores de um mesmo departamento compartilham gestores e padrões de e-mail. Com doze clusters, ela estima que o estudo consegue detectar uma diferença de cerca de dez pontos percentuais e diz com clareza que efeitos menores podem passar despercebidos.
3.3 Riscos éticos e práticos
Mireille lista os riscos e as respostas. Os servidores podem se sentir vigiados: a comissão de representantes revisa todas as mensagens, e só se reportam resultados por departamento. Os gestores podem pedir os nomes de quem clica: o acordo de dados proíbe isso. Um ataque real durante o estudo pode ser confundido com uma simulação: os e-mails simulados levam um marcador oculto conhecido pela equipe de segurança, e todo reporte real é tratado normalmente. A equipe de TI pode mudar o filtro de e-mail no meio do estudo: as mudanças são registradas para que a análise possa levá-las em conta.
3.4 Revisão pela banca
A banca da proposta inclui um estatístico, uma psicóloga organizacional e um profissional de outra prefeitura. O estatístico pede um teste de permutação que respeite o desenho escalonado; a psicóloga pergunta como o ônus será medido; o profissional alerta que botões de reporte podem sobrecarregar equipes de segurança pequenas. Mireille acrescenta uma etapa de triagem automatizada que agrupa reportes duplicados. A banca aprova com essas mudanças. Propostas melhoram mais quando revisores de disciplinas diferentes podem contestá-las antes do início da coleta de dados. Os comentários da banca e as respostas de Mireille ficam em um apêndice da proposta, para leitores futuros.
Exemplo resolvido
Mireille propõe uma implantação escalonada e sorteada em doze departamentos, define desfechos considerando o agrupamento, planeja salvaguardas éticas e revisa a proposta depois de uma banca multidisciplinar.
Caso sintético. O desenho e os departamentos são sintéticos; a Phish Scale é real.
Erros e limites
Doze clusters dão poder estatístico limitado. Desenhos escalonados podem ser perturbados por mudanças organizacionais.
Exercícios
- EX015 — Ordem sorteada. Por que sortear a ordem em que os departamentos mudam? Rubrica: 3 = para controlar variações sazonais de ameaças que atingem todos;; 2 = sazonalidade;; 1 = vago;; 0 = nenhuma.
- EX016 — Desfecho primário. Qual é o desfecho primário do estudo? Rubrica: 3 = proporção de e-mails suspeitos reais reportados em até trinta minutos;; 2 = reporte;; 1 = cliques;; 0 = nenhuma.
- EX017 — Motivo do agrupamento. Por que levar o agrupamento em conta? Rubrica: 3 = servidores de um departamento compartilham gestores e padrões de e-mail;; 2 = contexto compartilhado;; 1 = vago;; 0 = nenhuma.
- EX018 — Confusão com ataque real. Como o protocolo evita confundir ataques reais com simulações? Rubrica: 3 = os e-mails simulados levam um marcador oculto conhecido pela equipe de segurança;; 2 = marcador;; 1 = vago;; 0 = nenhuma.
- EX019 — Alerta do profissional. Sobre o que o profissional alertou? Rubrica: 3 = botões de reporte podem sobrecarregar equipes de segurança pequenas;; 2 = carga de trabalho;; 1 = vago;; 0 = nenhuma.
- EX020 — Resposta com triagem. Como Mireille respondeu à preocupação com a carga de trabalho? Rubrica: 3 = uma etapa de triagem automatizada que agrupa reportes duplicados;; 2 = triagem;; 1 = vago;; 0 = nenhuma.
Síntese
Uma proposta forte randomiza o que pode, mede o que importa, planeja os riscos éticos e convida à contestação antes da coleta de dados.
Continue estudando — aula 03 (capítulo 03 de 08)
← Capítulo 02 · Índice das aulas · Capítulo 04 →
Continue para a próxima aula já escrita.