Capítulo 46 — Projeto final de engenharia II
Mapa da aula
Aula 46 publicada. Mapa, exemplo, EX136.
flowchart TD
N0["46.1 Conduzir o piloto"]
N1["46.2 Analisar os resultados"]
N2["Laboratório — Teste exato comparando os reportes de"]
N3["46.3 Decisão de escala"]
N4["Síntese"]
N0 --> N1 --> N2 --> N3 --> N4
N4 --> EX["Exemplo resolvido"]
EX --> Q["Exercício EX136"]
Desenho lógico
flowchart LR
N0["46.1 Conduzir o piloto"]
N1["46.2 Analisar os resultados"]
N2["Laboratório — Teste exato comparando os reportes de"]
N3["46.3 Decisão de escala"]
N4["Síntese"]
N0 --> N1 --> N2 --> N3 --> N4 --> Q["EX136"]
[46.1 Conduzir o piloto]
|
v
[46.2 Analisar os resultados]
|
v
[Laboratório — Teste exato comparando os reportes de]
|
v
[46.3 Decisão de escala]
|
v
[Síntese]
|
v
[Exemplo resolvido] --> [Exercício EX136]
Objetivos de aprendizagem
Você vai (1) pilotar o projeto final; (2) analisar resultados de grupos pequenos com um teste exato; (3) decidir se o projeto deve ganhar escala.
46.1 Conduzir o piloto
Aiko pilota o projeto para terceirizados com sessenta terceirizados ao longo de três meses. Eles recebem a integração diretamente da Greyford, podem reportar pelo formulário web ou pelo endereço de encaminhamento e seguem as mesmas regras de verificação de pagamentos e acessos que os funcionários. Ela acompanha os reportes de e-mails maliciosos reais, os tempos de veredito e as pontuações de ônus. Dois terceirizados saem e três entram durante o piloto, o que ela registra. O piloto inclui um mês de simulações anunciadas sob as regras éticas vigentes, com representantes dos terceirizados na banca de aprovação dos modelos.
46.2 Analisar os resultados
No mês de simulação, os terceirizados reportaram 21 de 60 e-mails simulados, e os funcionários em funções comparáveis reportaram 26 de 60. O laboratório calcula o teste exato de Fisher, adequado a grupos pequenos, e não encontra evidência clara de diferença. Aiko relata as duas taxas com o resultado do teste e observa que o piloto era pequeno demais para detectar diferenças modestas. As pontuações de ônus dos terceirizados são semelhantes às dos funcionários, e a mediana do tempo de veredito para os reportes deles fica dentro do nível de serviço de uma hora, atendendo aos principais critérios de sucesso definidos de antemão.
Laboratório — Teste exato comparando os reportes de terceirizados e funcionários
# Fisher's exact test (two-sided) for contractor vs employee reporting in simulations (synthetic).
from math import comb
a, n1, b, n2 = 21, 60, 26, 60
K, N = a + b, n1 + n2
def p(x): return comb(n1, x) * comb(n2, K - x) / comb(N, K)
p0 = p(a)
pv = sum(p(x) for x in range(max(0, K - n2), min(K, n1) + 1) if p(x) <= p0 * (1 + 1e-9))
print(f"contractors {a}/{n1} = {a / n1:.0%}, employees {b}/{n2} = {b / n2:.0%}, two-sided p = {pv:.2f}")
Execute com python3 lab_fisher.py. Saída verificada:
contractors 21/60 = 35%, employees 26/60 = 43%, two-sided p = 0.45
46.3 Decisão de escala
A regra de parada definida no capítulo 44 teria sido acionada se os reportes dos terceirizados caíssem abaixo da metade da taxa dos funcionários; isso não aconteceu. Aiko recomenda estender o programa a todos os terceirizados, com o risco residual dos dispositivos pessoais revisto depois de mais três meses. O conselho aprova. Ela observa que a decisão se apoia no cumprimento de critérios predefinidos, e não em um resultado significativo, o que é adequado porque o objetivo era a paridade, e não a superioridade. Planejar a regra de decisão de antemão a impediu de interpretar os resultados ao sabor de suas esperanças.
Exemplo resolvido
Aiko pilota os reportes de terceirizados com sessenta terceirizados, não encontra diferença clara em relação aos funcionários com o teste exato de Fisher e amplia a escala com base em critérios predefinidos.
Caso sintético. Os dados do piloto são sintéticos.
Erros e limites
Pilotos pequenos não demonstram equivalência com precisão. A rotatividade dos terceirizados afeta os resultados.
Exercícios
- EX136 — Taxas do piloto. Quais foram as taxas de reporte na simulação? Rubrica: 3 = terceirizados 21/60 e funcionários 26/60;; 2 = 35% contra 43%;; 1 = vago;; 0 = nenhuma.
- EX137 — Teste no laboratório. Que valor-p o teste exato de Fisher deu? Rubrica: 3 = cerca de 0,45;; 2 = não significativo;; 1 = 0,05;; 0 = nenhuma.
- EX138 — Base da decisão. Em que se baseou a decisão de escala? Rubrica: 3 = critérios predefinidos, incluindo a regra de parada;; 2 = critérios;; 1 = significância;; 0 = nenhuma.
Síntese
Pilotos julgados segundo critérios predefinidos sustentam decisões honestas mesmo quando as amostras são pequenas.
Continue estudando — aula 46 (capítulo 46 de 50)
← Capítulo 45 · Índice das aulas · Capítulo 47 →
Continue para a próxima aula já escrita.