OpenCyber Academy
Pesquisa doutoral · Capítulo 8 · Português
Código do curso: OCA-199Capítulo 08: OCA-199-C008

Capítulo 8 — Plano de defesa e de publicação

Ensino gratuito e aberto para quem deseja proteger pessoas e tecnologias. Não é preciso criar uma conta para estudar ou consultar as respostas.

Mapa da aula

Aula 08 publicada. Mapa, exemplo, EX045.

flowchart TD
  N0["8.1 A defesa"]
  N1["8.2 Perguntas difíceis"]
  N2["8.3 A pergunta do custo-benefício"]
  N3["8.4 Plano de publicação"]
  N4["8.5 Engajamento com os profissionais"]
  N5["8.6 Depois da defesa"]
  N6["8.7 Alinhamento estratégico"]
  N7["Síntese"]
  N0 --> N1 --> N2 --> N3 --> N4 --> N5 --> N6 --> N7
  N7 --> EX["Exemplo resolvido"]
  EX --> Q["Exercício EX045"]

Desenho lógico

flowchart LR
  N0["8.1 A defesa"]
  N1["8.2 Perguntas difíceis"]
  N2["8.3 A pergunta do custo-benefício"]
  N3["8.4 Plano de publicação"]
  N4["8.5 Engajamento com os profissionais"]
  N5["8.6 Depois da defesa"]
  N6["8.7 Alinhamento estratégico"]
  N7["Síntese"]
  N0 --> N1 --> N2 --> N3 --> N4 --> N5 --> N6 --> N7 --> Q["EX045"]

[8.1 A defesa]
    |
    v
[8.2 Perguntas difíceis]
    |
    v
[8.3 A pergunta do custo-benefício]
    |
    v
[8.4 Plano de publicação]
    |
    v
[8.5 Engajamento com os profissionais]
    |
    v
[8.6 Depois da defesa]
    |
    v
[8.7 Alinhamento estratégico]
    |
    v
[Síntese]
    |
    v
[Exemplo resolvido] --> [Exercício EX045]

Objetivos de aprendizagem

Você vai (1) preparar-se para uma defesa de doutorado; (2) antecipar perguntas difíceis; (3) planejar a publicação de artigos, corpus e código; (4) planejar um engajamento responsável com os profissionais.

8.1 A defesa

A defesa testa se a candidata consegue explicar, justificar e delimitar o trabalho. Nadia prepara uma apresentação de 40 minutos: problema, desenho, resultados, dano, limites, contribuições. Nadia dá à constatação do dano um slide próprio, logo depois do resultado de acurácia, para que os examinadores vejam os dois juntos. Ela ensaia com o Prof. Grant e com uma colega que faz o papel do examinador externo, e guarda slides de reserva para o estudo complementar e o teste do arquivo. Nadia termina com os limites de um corpus sintético e o piloto operacional planejado, para que as perguntas dos examinadores partam do que o estudo não consegue mostrar.

8.2 Perguntas difíceis

Examinadores simulados perguntam: "Por que um SOC deveria confiar num corpus sintético?" "Um ganho de 13 pontos compensa os dois ataques perdidos?" "Os resultados se manteriam para analistas com dois meses de experiência?" "O que refutaria sua afirmação?" Nadia responde com evidências e admite onde não sabe. Suas respostas se apoiam na tese: a revisão de realismo para o corpus sintético, a análise de falhas para os ataques perdidos e o perfil dos participantes para a experiência dos analistas, que ela admite não estar coberta pela amostra. Para a pergunta sobre refutação, ela aponta um piloto operacional em pelo menos dois SOCs.

8.3 A pergunta do custo-benefício

Sobre os ataques perdidos, Nadia evita um simples sim. Ela explica que o valor depende das taxas de base e dos custos do SOC (Axelsson, 2000): se os disparos benignos consomem a maior parte do tempo dos analistas, o ganho libera capacidade para investigações mais profundas, mas só se as salvaguardas reduzirem as perdas causadas pelo histórico. Ela propõe medir os dois num piloto operacional. Sua resposta mantém os dois resultados numa só frase, como faz a evidência, e usa o mesmo raciocínio sobre taxas de base que motivou o projeto desde o início.

8.4 Plano de publicação

Artigo 1 (experimento e dano) para um veículo de segurança; artigo 2 (corpus e gerador) para uma trilha de conjuntos de dados; um artigo para gerentes de SOC. O corpus e o código são publicados com o primeiro artigo. Publicar o corpus com o primeiro artigo permite que os revisores verifiquem diretamente o material do experimento. O artigo de conjunto de dados descreve o gerador, os rótulos e as anotações de disparos benignos para que outros possam ampliá-los. O artigo para profissionais começa pela recomendação de salvaguardas para os campos de histórico e declara os limites de um corpus sintético.

8.5 Engajamento com os profissionais

Nadia apresenta os resultados primeiro aos analistas da Northgate, como prometido nos termos de consentimento, e oferece uma nota de desenho sobre cartões de alerta. Ela evita linguagem de marketing. Apresentar primeiro aos analistas da Northgate cumpre a promessa feita quando consentiram e permite que eles saibam dos ataques perdidos antes de qualquer outra pessoa. Ruth Okonkwo recebe os mesmos resultados agregados; nenhum desempenho individual de analista é mostrado. A nota de desenho propõe campos de contexto com avisos de contraevidência, em linha com a recomendação da tese. Os analistas podem comentar a nota antes que ela vá para Ruth.

8.6 Depois da defesa

As correções exigidas pelos examinadores são acompanhadas e concluídas antes da entrega final; o arquivo é atualizado com uma etiqueta de versão. Cada correção é listada com o comentário do examinador, a mudança e a página, e qualquer mudança que afete um número dispara uma nova execução a partir do arquivo. A etiqueta da versão final é citada na tese e nos artigos, para que todos os produtos apontem para o mesmo estado reprodutível do trabalho. O Prof. Grant aprova cada correção depois de conferi-la com a lista dos examinadores, e a tese final é depositada na Calder com o link do arquivo.

8.7 Alinhamento estratégico

A nota de desenho dela faz referência à Estratégia 8 de Knerler, Parker e Zimmerman (2022), "Leverage tools to support analyst workflow" (usar ferramentas para apoiar o fluxo de trabalho do analista), para conectar a pesquisa à linguagem de planejamento de SOC. A conexão permite que gerentes de SOC situem a recomendação dela dentro de um plano que talvez já usem, em vez de tratá-la como uma ideia de pesquisa isolada. Nadia toma cuidado para não afirmar que a estratégia é validada pelo estudo; ela a cita como linguagem de planejamento, enquanto sua evidência diz respeito a uma única escolha de desenho dentro dela. O artigo para profissionais cita a mesma estratégia, para que gerentes de SOC que leiam só o artigo vejam o mesmo limite da afirmação.

Exemplo resolvido

Na defesa simulada, diante da pergunta "O que refutaria sua afirmação?", Nadia responde: "Um piloto operacional em que os cartões enriquecidos com salvaguardas não mostrassem ganho de acurácia, ou mostrassem uma taxa de ataques perdidos maior que a da linha de base, em pelo menos dois SOCs."

Caso sintético. A defesa e os planos são inventados.

Erros e limites

Os prazos de publicação dependem dos revisores; planeje ciclos de revisão.

Exercícios

Síntese

Uma defesa forte explica, justifica e delimita o trabalho; os planos de publicação e de engajamento honram os participantes e ajudam a prática.

Continue estudando — capítulo 08 de 08

← Capítulo 07 (rascunho) · Índice de capítulos do curso · Resoluções ↓ · Próximo curso pelo índice de capítulos →

Respostas comentadas

EX045. Problema, desenho do estudo, resultados, o dano encontrado, limites e contribuições.

EX046. Ela disse que depende da prevalência e do custo de cada erro: o ganho só libera tempo dos analistas se as salvaguardas reduzirem as perdas causadas pelo histórico, o que um piloto operacional deveria medir.

EX047. Um piloto operacional em pelo menos dois SOCs que, com salvaguardas em vigor, não mostrasse ganho de acurácia ou mostrasse mais ataques perdidos do que a linha de base.

EX048. Um artigo sobre o experimento e o dano, um artigo de conjunto de dados sobre o corpus e o gerador, um artigo para profissionais e a publicação aberta do corpus e do código.

EX049. Os termos de consentimento prometiam que os participantes ouviriam os resultados primeiro.

EX050. A Estratégia 8, "Leverage tools to support analyst workflow", porque ela liga as constatações à forma como os SOCs planejam suas ferramentas.