Capítulo 39 — Avaliação do projeto final
Mapa da aula
Aula 39 publicada. Mapa, exemplo, EX115.
flowchart TD
N0["39.1 Em relação à proposta"]
N1["39.2 Qualidade das conclusões"]
N2["39.3 Reflexão sobre o método"]
N3["39.4 Melhorias para o escritório de segurança"]
N4["39.5 Aprendizado pessoal"]
N5["39.6 Verificação externa"]
N6["39.7 Honestidade"]
N7["O que mudaria as conclusões"]
N0 --> N1 --> N2 --> N3 --> N4 --> N5 --> N6 --> N7
N7 --> EX["Exemplo resolvido"]
EX --> Q["Exercício EX115"]
Desenho lógico
flowchart LR
N0["39.1 Em relação à proposta"]
N1["39.2 Qualidade das conclusões"]
N2["39.3 Reflexão sobre o método"]
N3["39.4 Melhorias para o escritório de segurança"]
N4["39.5 Aprendizado pessoal"]
N5["39.6 Verificação externa"]
N6["39.7 Honestidade"]
N7["O que mudaria as conclusões"]
N0 --> N1 --> N2 --> N3 --> N4 --> N5 --> N6 --> N7 --> Q["EX115"]
[39.1 Em relação à proposta]
|
v
[39.2 Qualidade das conclusões]
|
v
[39.3 Reflexão sobre o método]
|
v
[39.4 Melhorias para o escritório de segurança]
|
v
[39.5 Aprendizado pessoal]
|
v
[39.6 Verificação externa]
|
v
[39.7 Honestidade]
|
v
[O que mudaria as conclusões]
|
v
[Exemplo resolvido] --> [Exercício EX115]
Objetivos de aprendizagem
Você vai (1) avaliar o projeto final em relação à proposta; (2) avaliar a qualidade das conclusões; (3) refletir sobre o método; (4) identificar melhorias.
39.1 Em relação à proposta
As quatro perguntas foram respondidas com limites declarados; o exercício de sensibilidade foi concluído; o arquivo é reproduzível; o segundo host foi acrescentado (mudança registrada). As entregas cumpriram o cronograma, exceto o rascunho do laudo, com uma semana de atraso por causa da correção na análise de datas. A avaliação é honesta sobre o atraso e sua causa, algo que os avaliadores valorizam mais do que um histórico perfeito. Cada entrega é conferida com a lista da proposta. O deslize de uma semana consumiu parte da margem prevista no cronograma, de modo que a apresentação final se manteve no prazo, na semana 12.
39.2 Qualidade das conclusões
Cada conclusão é graduada pela força do seu apoio: P1 forte (as evidências de e-mail, proxy, navegador e arquivo concordam); persistência da P2 forte, com o comportamento completo pendente de análise especializada; P3 parcial (encaminhamento da caixa postal demonstrado, compartilhamento de arquivos desconhecido); P4 moderada (nenhum contato com indicadores nos logs examinados; outros caminhos de saída não cobertos). Graduar cada conclusão diz aos leitores quanto peso dar a ela. Uma conclusão forte é sustentada por várias fontes independentes; uma parcial tem lacunas conhecidas; uma moderada é limitada pela cobertura. Esses graus vêm diretamente do exercício de sensibilidade, portanto se apoiam na evidência e não na impressão de Leah.
39.3 Reflexão sobre o método
A matriz de evidências feita cedo economizou tempo; o desvio do relógio deveria ter sido conferido em mais de um ponto; as configurações de fuso horário das ferramentas deveriam ser padronizadas antes de a análise começar. Cada reflexão aponta para uma mudança específica. Montar a matriz de evidências cedo revelou lacunas antes que virassem surpresas. Medir o desvio do relógio em mais de um ponto teria respondido diretamente à pergunta da defesa. Configurar as ferramentas em UTC desde o início teria evitado a divergência de uma hora. Essas lições se tornam suas próprias regras de trabalho.
39.4 Melhorias para o escritório de segurança
Reter os logs de identidade e da caixa postal por mais tempo; ativar os logs de acesso ao compartilhamento de arquivos; padronizar a exibição em UTC nas ferramentas; suspender a reinstalação da imagem quando houver alerta. Cada recomendação vem de uma constatação: a retenção mais longa, do exercício de sensibilidade; os logs do compartilhamento de arquivos, da lacuna da P3; a exibição em UTC, da divergência entre ferramentas; e a suspensão da reinstalação, da revisão da arquitetura. Ligar as recomendações à evidência torna mais fácil justificá-las a quem as financia. Cada uma indica um responsável e um custo aproximado, e a lista é ordenada pelo quanto cada uma teria mudado os resultados da investigação da ws-114, usando o exercício de sensibilidade como medida.
39.5 Aprendizado pessoal
Leah observa que aprendeu mais com as falhas de verificação e com os questionamentos dos colegas. As falhas de verificação, como a divergência de uma hora, lhe ensinaram como as ferramentas podem enganar. Os questionamentos dos colegas, como a pergunta sobre o desvio, mostraram onde seu raciocínio precisava de mais apoio. Ambos são desconfortáveis, mas úteis, e ela observa que a ênfase do curso na revisão a preparou para acolhê-los em vez de se defender deles. Ela pretende continuar pedindo a um colega que questione suas constatações em trabalhos futuros, mesmo quando nenhuma revisão formal for exigida. A reflexão é curta e específica, e nomeia os episódios que mais lhe ensinaram.
39.6 Verificação externa
Grace revisa a avaliação e concorda com os graus, ajustando a P4 para "moderada, pendente da revisão do firewall". O ajuste de Grace na P4 reflete um conhecimento que Leah não tinha: os logs do firewall ainda não tinham sido revisados em busca de outros caminhos de saída. A verificação externa fortalece a avaliação ao trazer outro olhar. Leah registra a mudança e seu motivo, de modo que o grau final é rastreável até a revisão de Grace. Se a revisão do firewall depois não encontrar nenhum outro caminho de saída usado, a P4 pode subir de grau com essa evidência. Deixar o grau em aberto em vez de adivinhar mantém a avaliação honesta sobre o que de fato foi conferido.
39.7 Honestidade
Atrasos e erros são relatados com franqueza. Relatar atrasos e erros com franqueza mostra aos leitores que o restante do laudo merece confiança. Esconder o defeito na análise de datas poderia ter evitado constrangimento, mas deixaria o arquivo incoerente com o registro. Os avaliadores ficam sabendo o que deu errado e como foi corrigido, que é o mesmo padrão aplicado à própria investigação. A avaliação lista cada problema com sua data, seu efeito no trabalho e sua correção. Leitores que não encontram nenhum erro listado num projeto desse tamanho deveriam desconfiar; uma lista curta e honesta é mais crível.
O que mudaria as conclusões
Leah lista as descobertas que poderiam derrubar suas respostas: logs do firewall mostrando a ws-114 em contato com outros hosts mudariam a P4; logs do compartilhamento de arquivos vindos de um sistema de backup poderiam resolver a P3; uma análise especializada da update.dll poderia revelar capacidades de roubo de dados relevantes para a P2. Nomeá-las mantém as conclusões abertas a novas evidências e diz ao escritório de segurança onde procurar em seguida.
Exemplo resolvido
A tabela de avaliação de Leah lista cada pergunta, a resposta, as fontes de apoio, o grau e o fator limitante. Para a P3: "Parcial — encaminhamento de 37 mensagens da caixa postal demonstrado; acesso ao compartilhamento de arquivos desconhecido (registro desativado)."
Caso sintético. A avaliação é inventada.
Erros e limites
A autoavaliação tende a ser generosa; uma revisão externa e critérios explícitos contrabalançam isso.
Exercícios
- EX115 — Graus. Dê o grau de apoio da P1 e da P3, com os motivos. Rubrica: 3 = P1 forte (fontes concordantes); P3 parcial (compartilhamento de arquivos desconhecido); 2 = uma; 1 = errado; 0 = nada.
- EX116 — Lições de método. Cite duas lições de método. Rubrica: 3 = conferir o desvio mais de uma vez; padronizar os fusos horários das ferramentas (ou o valor da matriz feita cedo); 2 = uma; 1 = vago; 0 = nada.
- EX117 — Laudo atrasado. Como é relatado o rascunho atrasado? Rubrica: 3 = com franqueza, com a causa (correção na análise de datas); 2 = parcial; 1 = escondido; 0 = nada.
Síntese
Avalie com honestidade em relação ao plano, gradue o apoio de cada conclusão e transforme as lições em melhorias.
Continue estudando — capítulo 39 de 40
← Capítulo 38 (rascunho) · Índice de capítulos do curso · Capítulo 40 (rascunho) →