research.jflneto.dev.br
Resultados

Resultados — predição de matrículas em Maceió, horizonte t+2

Cinco experimentos: baselines, estratificação por etapa, incerteza e compra, coorte GPR e coorte espacial

03/06/2026Resultadosrodada executadaorigem: apresentacao_resultados.html

Sumário dos Achados Principais

  • O baseline campeão é o naive (último valor observado), com MAE = 30.46 alunos em t+2 — confirma a literatura: séries de matrícula são difíceis de superar com modelos complexos.
  • Estratificação por etapa não traz ganho estatisticamente significativo (p > 0,10 em todas as etapas): o naive já é ótimo por estrato.
  • A predição pontual subestima em ~49% dos casos. Comprar pelo P50 falta livros em 70% das escolas. O ponto ótimo é P70 (k=1) ou P80 (k≥3).
  • O modelo GPR de coorte reduz MAE em 1.22 alunos nas séries internas (22.23 → 21.01).
  • Exp. 5 espacial é inconclusivo: 40% das escolas sem coordenada GPS no arquivo de 2025.

Experimento 1 — Protocolo de Baselines

PerguntaQual é o erro de referência em t+2? Qual método é o campeão?

MAE médio por método (alunos). Menor = melhor. ★ = campeão global.

Tabela completa de métricas

MétodoMAEMASEUnder-rateUnder (total)Over (total)
Naive30,51,0448,6%88.12094.760
Média Móvel (3a)31,21,0546,6%88.01699.287
Auto-ARIMA40,61,3649,6%95.431148.424
Drift42,41,5260,5%144.844109.590
Tend. Linear45,11,6363,8%163.352107.371
Holt (ETS)47,61,7059,7%154.949130.888

MAE por etapa de ensino

MensagemMensagem: O naive vence com MAE = 30.46 alunos. Modelos de tendência (drift, Holt, linear) pioram o resultado — séries de matrícula têm variação não-linear e quebras. Este é o patamar a superar.

Experimento 2 — Estratificação por Etapa

PerguntaModelar separadamente por etapa supera um modelo global único?

Ganho em MAE (global − estratificado) por etapa. Verde = estratificar ajuda.

EtapaMétodo globalMétodo p/ etapaMAE globalMAE estrat.GanhoTestep-valor
EF Anos FinaisNaiveNaive29,429,40,0ttest_pareado
EF Anos IniciaisNaiveMédia Móvel (3a)13,413,20,2wilcoxon0,1255
EI CrecheNaiveNaive9,59,50,0ttest_pareado
EI Pré-escolaNaiveNaive12,612,60,0ttest_pareado
Ensino MédioNaiveNaive42,542,50,0ttest_pareado
OutrosNaiveNaive93,893,80,0ttest_pareado
MensagemMensagem: Estratificação por etapa não é significativa. Em EF-AI, o campeão muda para moving_average mas a diferença (0,2 alunos, p=0,13) não é relevante. Um único modelo global é suficiente.

Experimento 3 — Incerteza e Decisão de Compra PNLD

PerguntaA incerteza quantificada é confiável? Como orienta a decisão de compra?
Ressalva ⚠ Premissa — cobertura conformal marginal: A banda de predição garante cobertura no agregado do conjunto de calibração, não escola-a-escola. Cobertura por escola é empírica, não garantida.

Cobertura das bandas de predição

αAlvoPICP obtidoLargura média (MPIW)
0,1090,0%97,7%316,4
0,0595,0%99,2%512,0

Fronteira sobra × falta por nível de compra (P50 → P95)

Cada ponto = um quantil de compra. Passe o mouse para detalhes.

Custo total sob perda assimétrica

Uma curva por razão k (custo falta / custo sobra). ★ = ponto ótimo p*.

kp* ótimoCusto mínimo
1P70174.104
2P70259.709
3P80309.168
5P80406.132
10P80648.542
MensagemMensagem: Comprar pelo P50 (mediana) falta livros em 70% das escolas. Para k=1: P70 é ótimo. Para k≥3 (falta 3× mais cara que sobra): P80 minimiza o custo total. A incerteza quantificada é o que permite escolher o ponto certo na fronteira sobra×falta.

Experimento 4 — Coorte de Progressão (GPR)

PerguntaA razão de progressão entre séries (GPR) supera a série temporal pura nas séries internas?

Razão de progressão por transição

GPR médio por transição. Linha tracejada = 1,0 (crescimento neutro). Azul = acima de 1.

GPR vs. baseline campeão (séries internas)

TipoN GPRMAE GPRUnder-rate GPRN BaselineMAE BaselineRedução MAE
Internas6.74821,044,2%4.32522,2−1,2
MensagemMensagem: GPR reduz MAE em 1.22 alunos nas séries internas (22.23 → 21.01). A transição EF_5→EF_6 tem GPR=1,51 — grande influxo nos anos finais (migração entre escolas). EI_PRE→EF_1 tem GPR=0,80 (20% das crianças não continuam na mesma escola).

Experimento 5 — Coorte Espacial nas Fronteiras (POC)

PerguntaA estrutura espacial supera o time-series puro nas séries de fronteira?
Ressalva ⚠ 40% das escolas estão sem coordenada GPS (209 de 523 no arquivo de 2025). Resultado lido como "ganho real" ou "inconclusivo por qualidade de dado"não como "espacial não ajuda". Bounding box: lat [-9.69559, -9.44944], lon [-35.81122, -35.6073].

Erro espacial vs. time-series por tipo de fronteira

Sensibilidade ao número de vizinhos k

k=3 vizinhos minimiza MAE (29.66 alunos).

FronteiraMAE EspacialMAE BaselineDiferençaN predsLeitura
EI_PRE→EF_122,511,3-11,2582espacial melhor
EF_1→EF_210,88sem baseline pareado
EF_2→EF_314,76sem baseline pareado
EF_3→EF_44,58sem baseline pareado
EF_4→EF_516,011sem baseline pareado
EF_5→EF_679,236,5-42,7212espacial melhor
EF_6→EF_73,33sem baseline pareado
EF_7→EF_80,54sem baseline pareado
EF_8→EF_92,25sem baseline pareado
EF_9→EM_1130,825,5-105,328espacial melhor
EM_1→EM_21,01sem baseline pareado
EM_2→EM_31,01sem baseline pareado
MensagemMensagem: Nas grandes fronteiras (EI→EF1, EF5→EF6, EF9→EM1) o espacial tem MAE maior — 40% de coordenadas ausentes e simplificação da âncora temporal. Nas fronteiras menores dentro do EF, o espacial é competitivo com poucos dados. Resultado: inconclusivo por qualidade de dado.

Síntese — Direção do Erro por Método e Etapa

PerguntaQual método erra mais "para o lado perigoso" — subestima matrículas e falta livros?

Under-rate por método e etapa. Âmbar = maior risco de faltar livro.

MensagemMensagem: Drift, linear_trend e Holt têm under-rate de 60–69% em EF_AI e EI_PRE — tendem a projetar crescimento e subestimam em retração. Naive e moving_average ficam próximos de 50% (neutros). GPR tem under-rate de 44% — leve tendência a sobrar livro, o lado menos perigoso para o PNLD.

Premissas e Limitações

Ressalva Cobertura conformal — garantia marginal, não escola-a-escola.
As bandas do Exp. 3 garantem cobertura no agregado do conjunto de calibração (origens 2010 a 2022). Usar com cautela para decisões individuais por escola.
Ressalva Qualidade das coordenadas (Exp. 5).
40% das escolas de Maceió sem lat/lon no arquivo 2025. O resultado do Exp. 5 é POC com dado cru.
Ressalva ARIMA — ordem determinada 1×/série.
A seleção de ordem (max_p=1, max_q=1, max_d=1) usa a janela máxima de treino e é reutilizada em todos os folds da série. Backtesting não é estritamente rolling para a ordem ARIMA.
Ressalva Âncora temporal do Exp. 5 (POC simplificado).
O pool de vizinhos usa matrícula em T em vez da projeção T+1, criando desalinhamento de um ano. Um Exp. 5 completo compõe GPR (passo interno) + espacial (passo de fronteira) em dois passos.

Próximos Passos (já desenhados)

  • Módulo 1 — Variáveis exógenas: nascidos vivos (SINASC), população/IBGE defasados.
  • Módulo 2 — Decomposição do vazamento: evasão vs. migração rede privada vs. retenção.
  • O grafo de fronteira do Exp 5 entrega o vazamento total localizado por nó.