Capítulo 46 — Projeto final de engenharia II | Engenharia Perícia digital e análise de malware

Ensino gratuito e aberto para quem deseja proteger pessoas e tecnologias. Não é preciso criar uma conta para estudar ou consultar as respostas.

Mapa da aula

Aula 46 publicada. Mapa, exemplo, EX136.

flowchart TD
  N0["46.2 Comparação com o papel"]
  N1["46.3 Retorno qualitativo"]
  N2["46.4 Exceções"]
  N3["46.5 Interpretação"]
  N4["46.6 Recomendações"]
  N5["46.7 Limitações"]
  N6["46.8 Decisão de passagem"]
  N7["Custo e esforço"]
  N0 --> N1 --> N2 --> N3 --> N4 --> N5 --> N6 --> N7
  N7 --> EX["Exemplo resolvido"]
  EX --> Q["Exercício EX136"]

Desenho lógico

flowchart LR
  N0["46.2 Comparação com o papel"]
  N1["46.3 Retorno qualitativo"]
  N2["46.4 Exceções"]
  N3["46.5 Interpretação"]
  N4["46.6 Recomendações"]
  N5["46.7 Limitações"]
  N6["46.8 Decisão de passagem"]
  N7["Custo e esforço"]
  N0 --> N1 --> N2 --> N3 --> N4 --> N5 --> N6 --> N7 --> Q["EX136"]

[46.2 Comparação com o papel]
    |
    v
[46.3 Retorno qualitativo]
    |
    v
[46.4 Exceções]
    |
    v
[46.5 Interpretação]
    |
    v
[46.6 Recomendações]
    |
    v
[46.7 Limitações]
    |
    v
[46.8 Decisão de passagem]
    |
    v
[Custo e esforço]
    |
    v
[Exemplo resolvido] --> [Exercício EX136]

Objetivos de aprendizagem

Você vai (1) avaliar o piloto em relação aos objetivos; (2) analisar dados quantitativos e qualitativos; (3) recomendar os próximos passos; (4) relatar as limitações.

46.1 Resultados em relação aos objetivos

O1: 212 de 212 novos itens registrados (100%). O2: 0 exames sobre cópias não verificadas; 3 falhas de verificação apanhadas (todas em cópias pela rede, copiadas de novo com sucesso). O3: custódia completa para todos os itens. O4: satisfação mediana de 4 em 5, contra 3 em 5 na linha de base. Cada resultado corresponde diretamente ao seu objetivo, então o leitor não precisa interpretá-los. As três falhas apanhadas importam para o O2: elas mostram que a verificação bloqueante foi exercitada no uso real, e não apenas em testes. As três envolveram cópias pela rede, o que é coerente com a nota de pesquisa anterior, e todas foram resolvidas copiando de novo.

46.2 Comparação com o papel

Registros em papel do trimestre anterior: 17 de 198 itens tinham entradas de custódia incompletas. EvidenceDesk: 0 de 212. Dezessete de 198 são cerca de 8,6 por cento dos itens com lacunas, contra nenhum no piloto. A comparação não é perfeita, já que os trimestres diferem quanto aos casos e à atenção da equipe, mas os campos obrigatórios e as verificações bloqueantes explicam de forma plausível a maior parte da diferença. Priya lista quais campos faltavam com mais frequência no papel, sobretudo os números de lacre e os horários de transferência. Ela também confere se os dois trimestres receberam combinações parecidas de tipos de item, para que um trimestre dominado por celulares não pudesse explicar sozinho a diferença.

46.3 Retorno qualitativo

Os peritos gostaram da verificação bloqueante depois de se acostumarem a ela; não gostaram do passo extra de confirmação do número do lacre. Um deles disse que a exportação da custódia "vai economizar horas na preparação para o tribunal". O desagrado inicial com a verificação bloqueante desapareceu quando os peritos a viram apanhar problemas reais. A queixa sobre o número do lacre é específica e justa: confirmar o número exigia digitá-lo de novo por inteiro. O retorno é relatado como foi dado, incluindo as queixas, porque um relatório que só citasse elogios teria menos credibilidade para o gerente do laboratório. Uma confirmação mais simples está planejada em resposta.

46.4 Exceções

Cinco exceções ao longo do piloto: duas durante atualizações, três durante uma queda de energia. Todas conciliadas em até um dia útil. As exceções durante as atualizações vieram de funcionários tentando entrar no sistema durante a janela de mudança; a correção é um aviso claro na tela. A queda de energia parou o servidor, e os formulários em papel cobriram o intervalo, como projetado. Conciliar as cinco em um dia mostra que o procedimento de degradação funcionou na prática, e não só em ensaio. Cada registro de exceção inclui a digitalização do formulário em papel, o horário do relançamento e quem o conferiu.

46.5 Interpretação

O piloto atingiu todos os objetivos. Os resultados refletem um laboratório, três meses e uma equipe motivada e ciente do teste. Atingir os objetivos sustenta a adoção, mas Priya não afirma que os mesmos resultados se repetiriam num laboratório maior ou ao longo de anos. Uma equipe motivada que sabe que está num teste pode ser mais cuidadosa que o normal. Escrever isso protege a conclusão de exageros e diz aos leitores futuros o que ainda precisa ser conferido. Um acompanhamento depois de um ano inteiro testaria se os ganhos do piloto se mantêm.

46.6 Recomendações

Adotar o EvidenceDesk em caráter permanente; agendar a revalidação para a próxima atualização do gerador de imagens; simplificar a confirmação do lacre mantendo o campo obrigatório; manter as métricas mensais. Cada recomendação decorre de um achado do piloto: a adoção, dos objetivos; a revalidação, dos gatilhos do plano de validação; a mudança no passo do lacre, do retorno da equipe; e as métricas mensais, dos limites. Manter o campo do lacre obrigatório, mas mais fácil de preencher, responde à queixa sem perder o ganho de completude. Cada item tem um responsável e uma data. As recomendações são listadas em ordem de prioridade, com a adoção em primeiro lugar.

46.7 Limitações

Efeitos do tipo Hawthorne (a equipe se comporta de outro jeito quando observada), curta duração, nenhum laboratório de comparação. Uma equipe observada pode seguir os procedimentos com mais rigor que o normal, inflando a completude. Três meses podem não revelar problemas lentos, como o envelhecimento das mídias ou o retorno gradual da equipe aos velhos hábitos. Sem um laboratório de comparação que usasse só o papel no mesmo período, parte da melhoria poderia refletir mudanças gerais em Northfield. As métricas mensais vão mostrar se os resultados se mantêm quando a atenção diminuir. Cada limitação também sugere um acompanhamento que poderia reduzi-la.

46.8 Decisão de passagem

O gerente de Northfield aprova a adoção, com o responsável de TI como dono do sistema. Nomear um dono do sistema dá a uma pessoa a responsabilidade pelas atualizações, pelos backups e pela revalidação depois que Priya sair. O responsável de TI já tinha lançado uma versão durante a passagem de manutenibilidade, o que facilitou a decisão. Priya continua disponível para perguntas por três meses, e esse arranjo é escrito no registro de passagem. A aprovação do gerente é registrada com a data e as condições associadas, incluindo o calendário de revalidação, e arquivada com o relatório de validação, para que os auditores futuros possam encontrá-la.

Custo e esforço

Priya também relata o custo: um servidor reaproveitado, cerca de 120 horas do tempo dela e 30 horas de treinamento da equipe. O tempo de entrada por item subiu cerca de dois minutos, enquanto a preparação para o tribunal em questões de custódia caiu muito, segundo os peritos. Ela apresenta os dois para que o gerente pese a concessão real, e indica quais números foram medidos e quais são estimativas da equipe.

Exemplo resolvido

Resumo de Priya: "Ao longo de três meses, todo item novo foi registrado e nenhum exame começou sobre uma cópia não verificada; os registros de custódia incompletos caíram de 17 em 198 para 0 em 212. Esses resultados vêm de um laboratório durante um piloto observado."

Caso sintético. Os resultados do piloto são inventados.

Erros e limites

A melhoria durante um piloto pode desaparecer; continue medindo depois da adoção.

Exercícios

EX136 — Comparação da custódia. Compare a completude da custódia antes e durante o piloto.
Mostrar critérios de avaliação
Rubrica: 3 = 17/198 incompletos contra 0/212; 2 = parcial; 1 = errado; 0 = nada.
EX137 — Efeito da observação. Que limitação surge de a equipe saber do teste?
Mostrar critérios de avaliação
Rubrica: 3 = pode se comportar melhor quando observada; 2 = parcial; 1 = vago; 0 = nada.
EX138 — Passo do lacre. Como o passo do lacre de que não gostaram é tratado?
Mostrar critérios de avaliação
Rubrica: 3 = simplificar mantendo o campo obrigatório; 2 = parcial; 1 = remover; 0 = nada.

Síntese

Avalie em relação aos objetivos declarados, compare com a linha de base, ouça os usuários e declare os limites com clareza.

Continue estudando — capítulo 46 de 50

← Capítulo 45 (rascunho) · Índice de capítulos do curso · Capítulo 47 (rascunho) →