Capítulo 6 — Crítica de pares e revisão
Mapa da aula
Aula 06 publicada. Mapa, exemplo, EX033.
flowchart TD
N0["6.1 Fontes de crítica"]
N1["6.2 Organizando"]
N2["6.3 Críticas comuns"]
N3["6.4 Relevância jurídica"]
N4["6.5 Revisando afirmações"]
N5["6.6 Discordância"]
N6["6.7 Rastreamento"]
N7["Oficina com profissionais"]
N0 --> N1 --> N2 --> N3 --> N4 --> N5 --> N6 --> N7
N7 --> EX["Exemplo resolvido"]
EX --> Q["Exercício EX033"]
Desenho lógico
flowchart LR
N0["6.1 Fontes de crítica"]
N1["6.2 Organizando"]
N2["6.3 Críticas comuns"]
N3["6.4 Relevância jurídica"]
N4["6.5 Revisando afirmações"]
N5["6.6 Discordância"]
N6["6.7 Rastreamento"]
N7["Oficina com profissionais"]
N0 --> N1 --> N2 --> N3 --> N4 --> N5 --> N6 --> N7 --> Q["EX033"]
[6.1 Fontes de crítica]
|
v
[6.2 Organizando]
|
v
[6.3 Críticas comuns]
|
v
[6.4 Relevância jurídica]
|
v
[6.5 Revisando afirmações]
|
v
[6.6 Discordância]
|
v
[6.7 Rastreamento]
|
v
[Oficina com profissionais]
|
v
[Exemplo resolvido] --> [Exercício EX033]
Objetivos de aprendizagem
Você vai (1) solicitar e organizar a crítica de um estudo pericial; (2) responder ponto a ponto; (3) revisar afirmações e análises de forma transparente; (4) lidar com críticas sobre relevância jurídica.
6.1 Fontes de crítica
Orientador, banca, colegas de laboratório, pareceristas de conferências e profissionais da prática. Os profissionais perguntam se os resultados ajudam no trabalho com casos; os acadêmicos perguntam sobre o método. Ines trata os dois tipos de pergunta como úteis. Um profissional que pergunta se uma revocação de 0,58 deveria mudar a forma como resultados de carving são relatados aponta para a nota para profissionais que ela planeja, enquanto um acadêmico que pergunta sobre a escolha do intervalo testa o capítulo de método. Ela mantém os dois numa só tabela para que os comentários de nenhum dos grupos se percam. Pareceristas de conferências costumam pedir comparação com outros carvers, o que ela responde apontando para o escopo declarado e para o trabalho futuro sobre remontagem.
6.2 Organizando
Ines coloca cada comentário numa tabela: comentário, categoria (método, dados, interpretação, apresentação), resposta, mudança feita, localização. A tabela torna o progresso visível para o Prof. Achebe: cada linha mostra se um comentário foi aceito, parcialmente aceito ou respondido com evidências, e onde a tese mudou. Antes de cada reunião da banca, ela filtra as linhas ainda abertas, para que nenhum comentário seja esquecido. A versão final da tabela vai para o arquivo de reprodutibilidade junto com a tese, para que os examinadores possam rastrear cada mudança até o comentário que a motivou.
6.3 Críticas comuns
"Imagens sintéticas não são realistas." Resposta: o subestudo de realismo e os limites. "Só um tipo de arquivo." Resposta: aceito; listado como trabalho futuro, e um tipo semelhante a JPEG justificado por sua prevalência no trabalho com casos publicado. "A correspondência por hash é estrita demais." Resposta: resultados de sobreposição de bytes acrescentados. Cada resposta aponta para um lugar da tese onde a mudança pode ser conferida, como o capítulo de realismo ou a tabela de sobreposição de bytes. Uma resposta que não consegue apontar para esse lugar é tratada como inacabada. Críticas sobre realismo feitas por três pareceristas compartilham uma linha.
6.4 Relevância jurídica
Um profissional pergunta se as taxas de erro sobreviveriam ao escrutínio judicial de provas científicas. Ines responde que suas taxas se aplicam apenas ao método e às condições testados; os laboratórios precisam validar suas próprias ferramentas e procedimentos por processos no estilo da ISO/IEC 27041. Ela acrescenta um parágrafo curto sobre relevância jurídica ao seu capítulo de discussão. Ele explica que uma taxa de erro publicada para um método sob condições declaradas é um insumo para a validação de um laboratório, não um substituto dela, e nomeia as condições que um laboratório precisaria reproduzir antes de confiar nos valores dela.
6.5 Revisando afirmações
O resumo dizia originalmente "os carvers falham em arquivos fragmentados". Revisado: "A revocação do carving por cabeçalho e rodapé caiu de 0,96 para 0,58 à medida que a fragmentação subiu de 0% para 30% em imagens sintéticas." A revisão substituiu uma afirmação abrangente por uma vinculada a um método, a uma faixa de condições e a um conjunto de dados. Ines confere cada afirmação do resumo contra a tabela de resultados antes da submissão, e qualquer frase sem uma linha correspondente é cortada. A mesma conferência é repetida para a conclusão e para a nota para profissionais, porque as afirmações citadas fora de contexto costumam vir desses lugares.
6.6 Discordância
Quando Ines discorda, ela explica com evidências e oferece um meio-termo, como uma análise de sensibilidade adicional. Um parecerista queria que ela retirasse a condição de 10% porque seu intervalo se sobrepõe aos dois vizinhos. Ines a manteve, explicando que a sobreposição é em si um achado sobre o tamanho da amostra, e se ofereceu para relatar quantos arquivos por condição separariam os intervalos. O parecerista aceitou o meio-termo, e a tabela de comentários registra a troca. Ela nunca muda um resultado para resolver uma discordância; só a redação, a análise ou o escopo podem mudar, e cada mudança é registrada.
6.7 Rastreamento
Todas as revisões são registradas em commits com mensagens que fazem referência à tabela de comentários. Cada mensagem de commit nomeia o número da linha do comentário que responde, por exemplo, uma mudança no resumo que responde a uma observação da banca. Um leitor do repositório pode, portanto, seguir qualquer mudança até a pessoa e a razão que a motivaram. Ines também marca com uma tag a versão enviada a cada rodada de pareceristas, de modo que os comentários são sempre lidos contra o texto sobre o qual foram feitos. Quando um comentário não leva a nenhuma mudança, a linha registra por quê, de modo que a ausência de um commit também fica explicada.
Oficina com profissionais
Ines apresenta resultados preliminares numa oficina com peritos de laboratório. Eles pedem resultados por tamanho de arquivo e orientação sobre quando suspeitar de fragmentação no trabalho com casos. Ela acrescenta uma decomposição por tamanho e uma nota curta para profissionais, mantendo ambas dentro das evidências que seu estudo sustenta, e agradece aos participantes nos agradecimentos sem nomear seus laboratórios.
Exemplo resolvido
Um parecerista suspeita que o pontuador favorece a linha de base. Ines publica o pontuador separadamente e convida o parecerista a executá-lo em suas próprias imagens. O parecerista reproduz os números dela e retira a objeção.
Caso sintético. O parecer é inventado.
Erros e limites
Algumas críticas não podem ser resolvidas dentro de uma tese; liste-as abertamente.
Exercícios
- EX033 — Tabela de comentários. Liste as colunas da tabela de comentários de Ines. Rubrica: 3 = comentário, categoria, resposta, mudança, localização; 2 = três; 1 = uma; 0 = nada.
- EX034 — Resposta sobre realismo. Como Ines respondeu a "imagens sintéticas não são realistas"? Rubrica: 3 = subestudo de realismo e limites declarados; 2 = parcial; 1 = descartou; 0 = nada.
- EX035 — Pergunta sobre o tribunal. O que Ines disse sobre o uso judicial de suas taxas de erro? Rubrica: 3 = aplicam-se apenas ao método testado; os laboratórios devem validar os seus; 2 = parcial; 1 = válidas em juízo; 0 = nada.
- EX036 — Revisão do resumo. Por que a afirmação do resumo foi revisada? Rubrica: 3 = genérica demais; substituída por enunciado medido e delimitado; 2 = parcial; 1 = estilo; 0 = nada.
- EX037 — Suspeita sobre o pontuador. Como a objeção de viés foi resolvida? Rubrica: 3 = pontuador liberado; parecerista reproduziu; 2 = parcial; 1 = ignorada; 0 = nada.
- EX038 — Itens não resolvidos. O que deve acontecer com críticas que não podem ser resolvidas? Rubrica: 3 = listá-las abertamente como limites/trabalho futuro; 2 = parcial; 1 = escondê-las; 0 = nada.
Síntese
Organize a crítica, responda com evidências, restrinja as afirmações ao que foi medido e disponibilize as ferramentas para conferência independente.
Continue estudando — capítulo 06 de 08
← Capítulo 05 (rascunho) · Índice de capítulos do curso · Capítulo 07 (rascunho) →