◇ OpenCyber Academy
Pesquisa doutoral · Capítulo 6 · Português

Capítulo 6 — Crítica de pares e revisão

Ensino gratuito e aberto para quem deseja proteger pessoas e tecnologias. Não é preciso criar uma conta para estudar ou consultar as respostas.

Capítulo 6 — Crítica de pares e revisão

Mapa da aula

Aula 06 publicada. Mapa, exemplo, EX033.

flowchart TD
  N0["6.1 Fontes de crítica"]
  N1["6.2 As principais críticas"]
  N2["6.3 Classificar a gravidade"]
  N3["6.4 Respostas"]
  N4["6.5 A carta de resposta"]
  N5["6.6 Evitar a revisão defensiva"]
  N6["Síntese"]
  N0 --> N1 --> N2 --> N3 --> N4 --> N5 --> N6
  N6 --> EX["Exemplo resolvido"]
  EX --> Q["Exercício EX033"]

Desenho lógico

flowchart LR
  N0["6.1 Fontes de crítica"]
  N1["6.2 As principais críticas"]
  N2["6.3 Classificar a gravidade"]
  N3["6.4 Respostas"]
  N4["6.5 A carta de resposta"]
  N5["6.6 Evitar a revisão defensiva"]
  N6["Síntese"]
  N0 --> N1 --> N2 --> N3 --> N4 --> N5 --> N6 --> Q["EX033"]
[6.1 Fontes de crítica]
    |
    v
[6.2 As principais críticas]
    |
    v
[6.3 Classificar a gravidade]
    |
    v
[6.4 Respostas]
    |
    v
[6.5 A carta de resposta]
    |
    v
[6.6 Evitar a revisão defensiva]
    |
    v
[Síntese]
    |
    v
[Exemplo resolvido] --> [Exercício EX033]

Objetivos de aprendizagem

Você vai (1) buscar e receber crítica estruturada; (2) classificar as críticas por gravidade; (3) revisar afirmações, análises e texto em resposta; (4) documentar as respostas com transparência.

6.1 Fontes de crítica

A banca de Nadia, um examinador externo em formação, os analistas seniores da Northgate e os revisores anônimos de um artigo para um workshop leem o rascunho. Cada um vê fraquezas diferentes. Cada fonte olha a tese de um jeito: a banca, o método; o examinador em formação, a estrutura; os analistas seniores, o realismo; e os revisores do workshop, a afirmação. Nadia registra cada comentário numa única tabela, com sua fonte, para que nenhum se perca entre as versões. A tabela também registra em que versão cada mudança entrou e se o autor do comentário viu o texto revisado, para que o Prof. Grant possa verificar que cada fonte teve a chance de responder às mudanças de Nadia.

6.2 As principais críticas

Revisor 1: "O corpus é sintético; os disparos benignos em SOCs reais são mais confusos." Revisor 2: "O campo de histórico benigno pode estar fazendo todo o trabalho; você não consegue separar os três campos." Revisor 3: "Dois ataques perdidos são uma questão de segurança, não uma nota de rodapé." Um analista sênior: "Seus cartões de alerta não têm a linha de comando bruta, que é a primeira coisa que sempre olhamos." O comentário do analista mostra como a prática pode ver o que os pesquisadores deixam passar: os cartões foram desenhados a partir da propriedade contextual, mas os analistas trabalham a partir do evento bruto.

6.3 Classificar a gravidade

Nadia separa as críticas em: ameaça a validade (Revisor 2), muda as conclusões (Revisor 3), limita o escopo (Revisor 1), melhora o realismo (analista). As ameaças à validade são respondidas primeiro. Responder primeiro às ameaças à validade faz sentido porque elas poderiam mudar o que os dados significam. O ponto do Revisor 2 levou ao estudo complementar exploratório com cartões de campo único, enquanto o ponto do Revisor 3 mudou o destaque dado aos ataques perdidos. O comentário do analista levou à volta da linha de comando bruta em todos os cartões. O ponto do Revisor 1 virou um limite declarado de realismo, com um plano para um piloto operacional.

6.4 Respostas

Ao Revisor 2, ela responde com um estudo complementar exploratório com quatro analistas e cartões de campo único; o histórico, sozinho, produz a maior parte do ganho e os dois ataques perdidos — evidência de que o contexto de histórico é poderoso e arriscado. Ao Revisor 3, ela leva o dano para o resumo e recomenda mostrar o histórico apenas junto com um aviso de "por que ainda poderia ser malicioso". Ao Revisor 1, ela acrescenta uma seção de limites e publica o gerador para que outros possam testar o realismo. O ponto do analista é aceito para o próximo estudo.

6.5 A carta de resposta

Cada crítica é citada, seguida da mudança feita (com números de página) ou de uma discordância fundamentada. A carta de Nadia responde ao Revisor 2 descrevendo o estudo complementar e identificando seu resultado como exploratório, para que o revisor veja que a confusão de fatores foi tratada sem exageros. Quando discorda, como no pedido de abandonar de vez o corpus sintético, ela explica o porquê com evidências da revisão de realismo e dos limites éticos para dados reais de SOC. Cada mudança traz um número de página. O Prof. Grant lê a carta antes do envio, verificando que cada mudança alegada pode ser encontrada na página citada.

6.6 Evitar a revisão defensiva

Grant lembra a ela que a réplica sem mudança raramente convence; quando um revisor está errado, mostre a evidência. No caso do Revisor 3, a réplica teria significado argumentar que dois ataques em muitas decisões eram um número pequeno. Em vez disso, Nadia levou os ataques perdidos para o resumo e acrescentou uma recomendação de desenho, o que convenceu o revisor mais do que qualquer argumento conseguiria. O lembrete de Grant vale tanto para os instintos dela quanto para o tom dos revisores. A carta de resposta mostra a mudança para cada crítica aceita.

Exemplo resolvido

Trecho da resposta: "R2.1 — Concordamos que os campos estão confundidos. Um estudo complementar (n = 4 analistas, 40 alertas cada) com cartões de campo único sugere que o campo de histórico benigno responde pela maior parte da melhora e pelos dois ataques perdidos (relatado no capítulo de crítica, identificado como exploratório)."

Caso sintético. As críticas e o estudo complementar são inventados.

Erros e limites

Um estudo complementar com quatro analistas é exploratório; orienta trabalhos futuros, mas não resolve a atribuição.

Exercícios

Síntese

Reúna críticas de muitas fontes, ordene-as pela ameaça à validade, revise com evidências e documente cada resposta.

Continue estudando — capítulo 06 de 08

← Capítulo 05 (rascunho) · Índice de capítulos do curso · Capítulo 07 (rascunho) →