Capítulo 8 — Revisão independente e defesa

Capítulo 8 — Revisão independente e defesa

Mapa da aula

Aula 08 publicada. Mapa, exemplo, EX045.

flowchart TD
  N0["8.1 Revisão independente"]
  N1["8.2 A defesa"]
  N2["8.3 A entrega"]
  N3["8.4 Reflexão"]
  N0 --> N1 --> N2 --> N3
  N3 --> EX["Exemplo resolvido"]
  EX --> Q["Exercício EX045"]

Desenho lógico

flowchart LR
  N0["8.1 Revisão independente"]
  N1["8.2 A defesa"]
  N2["8.3 A entrega"]
  N3["8.4 Reflexão"]
  N0 --> N1 --> N2 --> N3 --> Q["EX045"]

[8.1 Revisão independente]
    |
    v
[8.2 A defesa]
    |
    v
[8.3 A entrega]
    |
    v
[8.4 Reflexão]
    |
    v
[Exemplo resolvido] --> [Exercício EX045]

Objetivos de aprendizagem

Você vai (1) obter a revisão independente da análise; (2) defender uma dissertação sob arguição; (3) entregar os achados a uma organização de forma responsável.

8.1 Revisão independente

Antes da submissão, uma estatística de outro departamento executa de novo os scripts de Priya sobre os dados sintéticos e obtém os mesmos números. Ela sugere verificar se alguns poucos departamentos determinam o resultado. Priya repete a estimativa deixando de fora, um de cada vez, cada departamento com feedback; a direção se mantém todas as vezes, embora uma das omissões alargue o intervalo até quase tocar o zero. Priya relata essa verificação exploratória, observando que, com apenas três departamentos tratados, o resultado depende visivelmente de cada um. O relatório da estatística é incluído como apêndice, com a permissão dela.

8.2 A defesa

Na defesa, os examinadores perguntam por que a Harrowgate deveria confiar num resultado de três departamentos. Priya responde que ela deve tratar o resultado como animador, mas provisório, sustentando uma implantação em etapas com medição contínua, e não uma troca completa. Outro examinador pergunta se o feedback é ético quando mostra aos funcionários seus erros. Ela explica o relato por departamento, a ausência de punições e o aumento dos relatos, o que sugere que os funcionários não viveram o feedback como punitivo neste contexto. Os examinadores registram suas respostas.

8.3 A entrega

Priya apresenta os achados ao comitê de segurança da Harrowgate, usando o resumo de duas páginas. O comitê concorda em estender o feedback a mais dois departamentos e manter um departamento de comparação por mais dois trimestres. Ele também pede ao fornecedor da plataforma que inclua os endereços do scanner nas exportações, para que as medições futuras possam casar endereços em vez de tempos. Priya arquiva seus scripts, os dados sintéticos e o plano de análise no repositório da universidade, para que o comitê ou outro estudante possa repetir o estudo. O comitê agradece aos funcionários que participaram do estudo.

8.4 Reflexão

Priya reflete que a parte mais útil do seu trabalho pode ser a correção dos cliques do scanner, que muda a forma como a organização lê cada simulação futura. A estimativa principal é promissora, mas incerta. Ela observa que o próximo curso desta área, governança de dados, examina quem decide como dados como os logs de simulação são definidos e usados, o que importa porque seu desfecho dependeu de uma definição desse tipo. O Dr. Bello concorda e recomenda o achado do scanner para um artigo curto voltado a profissionais. Priya começa a redigir o artigo.

Exemplo resolvido

Priya passa pela revisão independente com uma verificação de deixar um de fora, defende o resultado como provisório, entrega os achados que levam a uma implantação em etapas e arquiva seus materiais.

Caso sintético. A revisão e a defesa são sintéticas.

Erros e limites

Apresentar um resultado de três departamentos como definitivo exagera a certeza.

Exercícios

• EX045 — Deixar um de fora. O que mostra deixar de fora cada departamento? Rubrica: 3 = a direção se mantém, uma omissão quase toca o zero;; 2 = parcialmente correto;; 1 = vago;; 0 = nenhuma.

• EX046 — Resposta sobre a confiança. Como a Harrowgate deve tratar o resultado? Rubrica: 3 = animador, mas provisório;; 2 = parcialmente correto;; 1 = definitivo;; 0 = nenhuma.

• EX047 — Resposta ética. O que sugere que o feedback não foi punitivo? Rubrica: 3 = os relatos aumentaram;; 2 = parcialmente correto;; 1 = vago;; 0 = nenhuma.

• EX048 — Decisão do comitê. O que o comitê decide? Rubrica: 3 = estender a dois departamentos, manter uma comparação;; 2 = parcialmente correto;; 1 = vago;; 0 = nenhuma.

• EX049 — Pedido ao fornecedor. O que o comitê pede ao fornecedor? Rubrica: 3 = endereços do scanner nas exportações;; 2 = parcialmente correto;; 1 = vago;; 0 = nenhuma.

• EX050 — Artigo para profissionais. O que o Dr. Bello recomenda para um artigo voltado a profissionais? Rubrica: 3 = o achado do scanner;; 2 = parcialmente correto;; 1 = outro;; 0 = nenhuma.

Continue estudando — aula 08 (capítulo 08 de 08)

← Capítulo 07 · Índice das aulas · Próximo curso pelo índice →

O índice aponta para o próximo curso do percurso de estudos.

Resoluções

Respostas-modelo para EX001–EX050. Priya Natarajan, o Dr. Olumide Bello, a Ashcombe University, a Harrowgate Community Health e todos os números são sintéticos; as respostas dos laboratórios citam saídas verificadas. Qualquer resposta que atenda à rubrica recebe a mesma pontuação.

EX001. Cerca de 2.400 funcionários em seis departamentos.

EX002. Se as taxas de cliques caem mais nos departamentos com feedback do que nos departamentos com treinamento anual.

EX003. Intervenção, desfecho, comparação e população.

EX004. Estudos que relatam comportamento medido, e não opiniões.

EX005. Que culpar os usuários raramente conserta os sistemas de segurança.

EX006. Ausência de medida comportamental, ausência de grupo de comparação ou simulação apenas em laboratório.

EX007. Vinte e três estudos.

EX008. Que as pessoas estejam conscientes da política e da sua contribuição para a segurança.

EX009. A visão geral atual que explica como a família se encaixa.

EX010. A família de conscientização e treinamento.

EX011. A função Proteger.

EX012. A aceitabilidade psicológica.

EX013. A taxa com que os funcionários relatam o phishing simulado.

EX014. Uma redução de alguns pontos percentuais.

EX015. Diferença em diferenças.

EX016. As influências compartilhadas pelos dois grupos, como o phishing sazonal.

EX017. As taxas de cliques dos dois grupos se moveram juntas.

EX018. Iscas mais difíceis num grupo distorceriam a comparação.

EX019. Apenas por departamento.

EX020. Um intervalo bootstrap de mil reamostragens com uma semente fixa.

EX021. Para que os funcionários não possam simplesmente aprender a reconhecer um padrão de simulação.

EX022. Confirmando que as regras de filtragem foram idênticas entre os departamentos.

EX023. O registro dos lembretes de segurança dos gerentes.

EX024. Os funcionários relatarem menos e-mails suspeitos.

EX025. Uma queda nos cliques apenas nos modelos repetidos, e não nos novos.

EX026. Para impedir a reinterpretação de resultados decepcionantes depois.

EX027. 239 cliques, 19,9 por cento dos funcionários.

EX028. 77 cliques atribuídos ao scanner.

EX029. 162 cliques humanos, 13,5 por cento.

EX030. Casar os cliques com os endereços de varredura conhecidos do gateway.

EX031. Um limiar de cinco segundos.

EX032. A taxa de cliques humanos, excluindo os cliques em até dois segundos.

EX033. De 15,8 para 6,7 por cento.

EX034. De 14,0 para 11,0 por cento.

EX035. Menos 6,2 pontos, intervalo de menos 10,7 a menos 1,2.

EX036. Lembretes extras dos gerentes nos departamentos com feedback.

EX037. Subiram um pouco nos departamentos com feedback.

EX038. Os cliques em simulações são apenas um indicador indireto do comportamento real.

EX039. A seção sobre os cliques do scanner que inflam as taxas brutas.

EX040. Os departamentos tratados foram escolhidos pela equipe de segurança, e não aleatoriamente.

EX041. Como ela poderia enviesar a estimativa e em que direção.

EX042. Para que a comparação entre os departamentos continue possível.

EX043. Duas páginas.

EX044. Duas frases que sugeriam que os funcionários eram descuidados.

EX045. A direção se mantém, mas uma omissão alarga o intervalo até quase o zero.

EX046. Como animador, mas provisório.

EX047. As taxas de relato aumentaram nos departamentos com feedback.

EX048. Estender o feedback a dois departamentos e manter um departamento de comparação.

EX049. Os endereços do scanner incluídos nas exportações.

EX050. O achado sobre os cliques do scanner, adequado aos profissionais.