Capítulo 10 — Leitura e crítica de pesquisas

Mapa da aula

Aula 10 publicada. Mapa, exemplo, EX046.

flowchart TD
  N0["10.1 Ler com propósito"]
  N1["10.2 Julgar a transferência"]
  N2["10.3 Escrever a crítica"]
  N3["Síntese"]
  N0 --> N1 --> N2 --> N3
  N3 --> EX["Exemplo resolvido"]
  EX --> Q["Exercício EX046"]

Desenho lógico

flowchart LR
  N0["10.1 Ler com propósito"]
  N1["10.2 Julgar a transferência"]
  N2["10.3 Escrever a crítica"]
  N3["Síntese"]
  N0 --> N1 --> N2 --> N3 --> Q["EX046"]

[10.1 Ler com propósito]
    |
    v
[10.2 Julgar a transferência]
    |
    v
[10.3 Escrever a crítica]
    |
    v
[Síntese]
    |
    v
[Exemplo resolvido] --> [Exercício EX046]

Objetivos de aprendizagem

Você vai (1) ler criticamente artigos de pesquisa sobre arquitetura de segurança; (2) julgar se os achados se transferem para a Corvane; (3) escrever uma crítica estruturada.

10.1 Ler com propósito

A Dra. Voss passa uma tarefa de leitura: encontrar e criticar pesquisas publicadas sobre se os projetos de segmentação ou de zero trust reduzem o impacto dos incidentes. Priya lê com três perguntas. O que exatamente foi medido? Como a comparação foi feita? O cenário se pareceria com uma rede de clínicas? Ela observa que muitos artigos medem redes simuladas ou a base de clientes de fornecedores, e poucos medem a área da saúde. Herley e van Oorschot (2017) argumentam que a pesquisa em segurança muitas vezes carece de afirmações falseáveis, então ela procura estudos que declarem que resultado os teria contrariado.

10.2 Julgar a transferência

Um estudo de grandes empresas conclui que redes segmentadas contêm o movimento lateral mais depressa. Priya pergunta se isso se transfere para a Corvane: suas clínicas são menores, têm dispositivos legados e dependem de um prontuário eletrônico central. Alguns mecanismos se transferem, como limitar os hosts alcançáveis; outros não, como uma equipe dedicada de operações de segurança observando cada alerta. Ela conclui que a direção do achado provavelmente se aplica, mas que o tamanho do efeito é incerto. Os julgamentos de transferência são argumentos fundamentados sobre mecanismos, e não respostas simples de sim ou não.

10.3 Escrever a crítica

Priya escreve uma crítica de duas páginas para cada artigo: afirmação, método, dados, ameaças à validade, transferência para a Corvane e que evidências adicionais ajudariam. Ela evita descartar trabalhos por imperfeições que todo estudo tem e, em vez disso, julga se as falhas minam a afirmação. As conclusões de um artigo se apoiam numa comparação antes e depois sem controle, durante um período de outras mudanças, o que ela marca como fraco. Outro usa um grupo de comparação cuidadoso, que ela marca como mais forte apesar da amostra menor. Criticar é pesar evidências, e não marcar pontos.

Exemplo resolvido

Priya critica pesquisas sobre segmentação com três perguntas de leitura, raciocina sobre a transferência por mecanismo e escreve críticas estruturadas.

Caso sintético. Os artigos descritos são composições sintéticas; Herley e van Oorschot (2017) é real.

Erros e limites

As críticas podem ser mais duras com achados indesejados. O raciocínio sobre transferência é, ele próprio, incerto.

Exercícios

• EX046 — Três perguntas. Que três perguntas orientam a leitura de Priya?

  Mostrar critérios de avaliação

  Rubrica: 3 = o que foi medido, como se comparou, se o cenário se pareceria com uma clínica;; 2 = duas;; 1 = vago;; 0 = nenhuma.

• EX047 — Afirmações falseáveis. Por que procurar estudos que declarem o que os contrariaria?

  Mostrar critérios de avaliação

  Rubrica: 3 = a pesquisa em segurança muitas vezes carece de afirmações falseáveis;; 2 = falseável;; 1 = vago;; 0 = nenhuma.

• EX048 — Mecanismo que não se transfere. Que mecanismo do estudo empresarial não se transferiu?

  Mostrar critérios de avaliação

  Rubrica: 3 = uma equipe dedicada de operações de segurança observando os alertas;; 2 = equipe;; 1 = segmentação;; 0 = nenhuma.

• EX049 — Conclusão sobre a transferência. O que Priya concluiu sobre a transferência?

  Mostrar critérios de avaliação

  Rubrica: 3 = a direção provavelmente se aplica, o tamanho do efeito é incerto;; 2 = direção;; 1 = transferência total;; 0 = nenhuma.

• EX050 — Desenho fraco. Por que um artigo foi marcado como fraco?

  Mostrar critérios de avaliação

  Rubrica: 3 = comparação antes e depois sem controle durante outras mudanças;; 2 = sem controle;; 1 = amostra pequena;; 0 = nenhuma.

Síntese

A leitura crítica pergunta o que foi medido, como, e se os mecanismos se transferem, e pesa as falhas pelo seu efeito sobre as afirmações.