Capítulo 5 — Estudo principal e validação independente
Mapa da aula
Aula 05 publicada. Mapa, exemplo, EX027.
flowchart TD
N0["5.1 Desenho do estudo principal"]
N1["5.2 Efeitos sobre as contagens"]
N2["5.3 Validação independente"]
N3["5.4 Interpretando os achados"]
N0 --> N1 --> N2 --> N3
N3 --> EX["Exemplo resolvido"]
EX --> Q["Exercício EX027"]
Desenho lógico
flowchart LR
N0["5.1 Desenho do estudo principal"]
N1["5.2 Efeitos sobre as contagens"]
N2["5.3 Validação independente"]
N3["5.4 Interpretando os achados"]
N0 --> N1 --> N2 --> N3 --> Q["EX027"]
[5.1 Desenho do estudo principal]
|
v
[5.2 Efeitos sobre as contagens]
|
v
[5.3 Validação independente]
|
v
[5.4 Interpretando os achados]
|
v
[Exemplo resolvido] --> [Exercício EX027]
Objetivos de aprendizagem
Você vai (1) executar a simulação principal das decisões de governança; (2) medir os efeitos sobre as contagens publicadas; (3) validar os resultados de forma independente.
5.1 Desenho do estudo principal
O estudo principal varia três decisões dentro de faixas que a equipe de Westmark considerou plausíveis: o limiar de pareamento, de 0 a 8; a reestimação ou não de m e u a cada ano; e a imputação ou não dos códigos de setor em branco. Cada combinação produz um conjunto sintético de contagens regionais de emprego. Nadia roda todas as combinações com sementes aleatórias fixas e armazena as saídas junto com a versão do script. Ela compara cada resultado com uma referência produzida a partir dos vínculos sintéticos verdadeiros, que são conhecidos porque ela mesma gerou os dados.
5.2 Efeitos sobre as contagens
Os resultados mostram que o limiar tem o maior efeito. Com limiares baixos, vínculos falsos inflam o emprego em regiões com muitas empresas de nomes parecidos. Com limiares altos, vínculos perdidos reduzem as contagens em regiões onde os códigos postais mudam com frequência. Reestimar m e u reduz os dois tipos de erro. Imputar códigos de setor desloca emprego entre setores, mas quase não altera os totais regionais. Nadia expressa cada efeito como a diferença em relação à referência, para que os leitores vejam quais decisões mais importam e em quais regiões. As regiões pequenas apresentam os maiores erros relativos.
5.3 Validação independente
Para validar, o Prof. Eriksen providencia que um pesquisador de outra universidade, que não viu o código de Nadia, implemente o método a partir da descrição escrita dela e o execute em uma nova réplica sintética, gerada com outra semente. Os resultados independentes concordam em direção e magnitude aproximada para as três decisões. Surge uma discrepância porque a descrição de Nadia omitia como os empates no limiar eram tratados. Ela corrige a descrição, mostrando como a validação melhora a documentação, além da confiança nos resultados. As duas execuções são arquivadas.
5.4 Interpretando os achados
Nadia relaciona os achados à governança. A decisão de maior efeito, o limiar, é também a de titularidade menos clara. A decisão de menor efeito sobre os totais regionais, a imputação de setor, é a mais documentada, porque consta de um manual publicado. Ela argumenta que, em Westmark, a atenção da governança seguiu a visibilidade, e não o impacto. O Prof. Eriksen a adverte para não generalizar a partir de uma única organização, e ela formula a afirmação como uma hipótese a ser testada por outros institutos de estatística.
Exemplo resolvido
Nadia varia limiar, reestimação e imputação, constata que o limiar tem o maior efeito sobre as contagens regionais, obtém de um pesquisador independente a reprodução da direção e da magnitude dos efeitos e relaciona o impacto à titularidade pouco clara.
Caso sintético. Os resultados são sintéticos.
Erros e limites
As faixas plausíveis vêm de entrevistas; outras organizações podem usar faixas mais amplas.
Exercícios
- EX027 — Três decisões. Cite as três decisões variadas. Rubrica: 3 = limiar, reestimação de m e u, imputação de setor;; 2 = todas;; 1 = uma;; 0 = nenhuma.
- EX028 — Maior efeito. Qual decisão teve o maior efeito? Rubrica: 3 = o limiar de pareamento;; 2 = parcialmente correto;; 1 = outra;; 0 = nenhuma.
- EX029 — Limiar baixo. O que acontece com as contagens em limiares baixos? Rubrica: 3 = vínculos falsos inflam as contagens;; 2 = parcialmente correto;; 1 = vago;; 0 = nenhuma.
- EX030 — Método de validação. Por que a validação foi independente? Rubrica: 3 = outro pesquisador reimplementou a partir da descrição com nova semente;; 2 = menciona reimplementação;; 1 = vago;; 0 = nenhuma.
- EX031 — Discrepância. O que causou a discrepância na validação? Rubrica: 3 = tratamento não documentado de empates no limiar;; 2 = parcialmente correto;; 1 = vago;; 0 = nenhuma.
- EX032 — Atenção. O que a atenção da governança seguiu em Westmark? Rubrica: 3 = a visibilidade, e não o impacto;; 2 = parcialmente correto;; 1 = vago;; 0 = nenhuma.
Continue estudando — aula 05 (capítulo 05 de 08)
← Capítulo 04 · Índice das aulas · Capítulo 06 →
Continue para a próxima aula já escrita.