Capítulo 8 — Revisão independente e defesa
Mapa da aula
Aula 08 publicada. Mapa, exemplo, EX045.
flowchart TD
N0["8.1 Revisão independente"]
N1["8.2 A defesa"]
N2["8.3 A entrega"]
N3["8.4 Reflexão"]
N0 --> N1 --> N2 --> N3
N3 --> EX["Exemplo resolvido"]
EX --> Q["Exercício EX045"]
Desenho lógico
flowchart LR
N0["8.1 Revisão independente"]
N1["8.2 A defesa"]
N2["8.3 A entrega"]
N3["8.4 Reflexão"]
N0 --> N1 --> N2 --> N3 --> Q["EX045"]
[8.1 Revisão independente]
|
v
[8.2 A defesa]
|
v
[8.3 A entrega]
|
v
[8.4 Reflexão]
|
v
[Exemplo resolvido] --> [Exercício EX045]
Objetivos de aprendizagem
Você vai (1) obter uma revisão independente da análise; (2) defender uma dissertação de mestrado; (3) entregar os achados à organização parceira.
8.1 Revisão independente
Antes do depósito, uma estatística de outro departamento do Kestrel revisa o código e os dados de Tomás sem a ajuda dele. Ela executa novamente a análise a partir do arquivo e obtém a mesma estimativa e o mesmo intervalo. Questiona se 2.000 reamostragens são suficientes; Tomás roda com 10.000, e o intervalo muda menos de um décimo de dia. Ela também pede um teste placebo, usando um período anterior ao piloto como se fosse o piloto, que não mostra efeito algum e assim apoia o desenho. O resultado do placebo é relatado em um apêndice.
8.2 A defesa
Na defesa, a banca pergunta por que a prefeitura deveria confiar em um resultado obtido com dois departamentos. Tomás responde que o resultado é consistente mês a mês, resiste às verificações relatadas e tem um mecanismo plausível, mas que a extensão deve ser avaliada por sua vez. Um examinador pergunta sobre a reprodução sintética; ele explica que a equipe de dados da prefeitura fez a extração internamente e que os dados sintéticos batem com os resumos que ela publicou. A banca o aprova e elogia o tratamento das explicações rivais. Seguem-se pequenos ajustes.
8.3 A entrega
Tomás apresenta os achados ao comitê de governança de dados de Arden. O comitê decide estender a curadoria às bibliotecas e às licenças de estacionamento, enquanto a assistência social aguarda uma revisão de suas obrigações legais. Adota as regras de normalização como padrão da prefeitura e pede à equipe de dados que continue a relatar o tempo de correção até o último sistema. Tomás entrega os scripts de análise e um guia para que os servidores possam refazer a avaliação da extensão sem ele. O guia inclui o teste placebo e as regras de normalização.
8.4 Reflexão
Tomás reflete que a parte mais útil do seu trabalho talvez sejam as definições de medida, que a prefeitura continuará usando, e não a estimativa isolada. Observa que a pesquisa em governança precisa respeitar as pessoas cujo trabalho é estudado: os curadores estavam ansiosos com a avaliação, e os relatórios no nível do departamento preservaram a confiança deles. A Dra. Solberg encerra a orientação lembrando que boas avaliações facilitam que as organizações aprendam tanto com o sucesso quanto com o fracasso. Mais tarde, Tomás passa a integrar a equipe de dados de Arden.
Exemplo resolvido
Uma estatística independente reproduz a estimativa, verifica o número de reamostragens e roda um teste placebo; Tomás é aprovado na defesa, e a prefeitura estende a curadoria e adota suas definições.
Caso sintético. A revisão e o comitê são sintéticos.
Erros e limites
Extensões a novos departamentos podem não reproduzir os efeitos do piloto; avalie-as.
Exercícios
- EX045 — Verificação da revisora. O que a revisora mudou no bootstrap? Rubrica: 3 = reamostragens de 2.000 para 10.000;; 2 = parcialmente correto;; 1 = vago;; 0 = nenhuma.
- EX046 — Placebo. O que o teste placebo mostrou? Rubrica: 3 = nenhum efeito em um período anterior ao piloto;; 2 = parcialmente correto;; 1 = vago;; 0 = nenhuma.
- EX047 — Preocupação da banca. O que a banca questionou? Rubrica: 3 = confiar em um resultado de dois departamentos;; 2 = parcialmente correto;; 1 = vago;; 0 = nenhuma.
- EX048 — Decisão do comitê. Para quais departamentos a curadoria se estende em seguida? Rubrica: 3 = bibliotecas e estacionamento;; 2 = ambos;; 1 = um;; 0 = nenhuma.
- EX049 — Assistência social. Por que a assistência social aguarda? Rubrica: 3 = revisão de suas obrigações legais;; 2 = parcialmente correto;; 1 = vago;; 0 = nenhuma.
- EX050 — Valor duradouro. Qual pode ser a parte mais útil do trabalho de Tomás? Rubrica: 3 = as definições de medida;; 2 = parcialmente correto;; 1 = vago;; 0 = nenhuma.
Continue estudando — aula 08 (capítulo 08 de 08)
← Capítulo 07 · Índice das aulas · Próximo curso pelo índice →
O índice aponta para o próximo curso do percurso de estudos.
Resoluções
Respostas-modelo para EX001–EX050. Tomás Ferreira, a Dra. Ingrid Solberg, o Instituto de Tecnologia Kestrel, a Prefeitura do Condado de Arden e todos os números são sintéticos. As respostas dos laboratórios citam saídas verificadas. Qualquer resposta que atenda à rubrica recebe a mesma pontuação.
EX001. Cinco departamentos mantêm suas próprias cópias de endereços, o que gera duplicatas e correções lentas.
EX002. Os dias entre a notificação de um erro e sua correção.
EX003. Os departamentos sem curadores de dados.
EX004. A responsabilização pelos dados em nome de outras pessoas.
EX005. Um desfecho medido antes e depois de uma mudança de governança.
EX006. Uma décima parte aleatória.
EX007. Estudos que medem os desfechos de mudanças de governança.
EX008. Função (DAMA), decisões (Khatri e Brown) e responsabilização do conselho (ISO).
EX009. Dirige, avalia e monitora o uso dos dados.
EX010. Sem direitos de decisão, o cargo muda pouco.
EX011. Atualidade.
EX012. Em relação a requisitos declarados.
EX013. A cultura da prefeitura, e não a estrutura.
EX014. A curadoria funciona onde os curadores detêm direitos de decisão e podem propagar correções.
EX015. A prefeitura já tinha escolhido os departamentos com curadores.
EX016. Diferenças em diferenças.
EX017. Tendências paralelas na ausência do piloto.
EX018. Departamentos com curadores recebendo atenção extra.
EX019. Somente no nível do departamento, nunca individual.
EX020. Cinco dias.
EX021. Uma nova ferramenta de consulta e um volume menor de erros.
EX022. Ela afetou igualmente os dois grupos.
EX023. Entrevistas e a comparação dos dois primeiros meses com os seguintes.
EX024. Se os departamentos já compartilhavam correções informalmente.
EX025. Melhora igual nos dois grupos.
EX026. Para que achados incômodos não possam ser justificados depois.
EX027. Se os métodos de medição funcionam, não a pergunta de pesquisa.
EX028. Nenhuma.
EX029. 384 (11,6%).
EX030. Converter para minúsculas e expandir abreviações.
EX031. Dias até o endereço corrigido aparecer nos cinco sistemas.
EX032. Antes da coleta dos dados principais de desfecho.
EX033. De 24,1 para 14,8 dias.
EX034. -7,0 dias.
EX035. De -9,1 a -4,8 dias.
EX036. Sim, todo o intervalo fica além de cinco dias.
EX037. A tributação também melhorou, apesar de não ter compartilhamento informal prévio.
EX038. Um padrão único de endereço e uma rotina semanal de propagação.
EX039. O achado de que as taxas de duplicidade medidas dependem das regras de normalização.
EX040. Cinco.
EX041. Não mostra se os ganhos se mantêm.
EX042. Mais pesquisas são necessárias.
EX043. Estender a curadoria aos outros três departamentos.
EX044. Inconsistências custam credibilidade diante de tomadores de decisão.
EX045. Ela pediu 10.000 reamostragens em vez de 2.000.
EX046. Nenhum efeito quando um período anterior ao piloto foi tratado como piloto.
EX047. Se dois departamentos justificam confiança no resultado.
EX048. Bibliotecas e estacionamento.
EX049. Suas obrigações legais precisam ser revistas antes.
EX050. As definições de medida que a prefeitura continua usando.