Uma turma improvisada de amigos da internet tornou-se a melhor em prever eventos mundiais
Um artigo sobre “superprevisores” que usam taxas-base e raciocínio ao estilo bayesiano para prever eventos geopolíticos como uma invasão chinesa de Taiwan provoca debate sobre o quão significativas essas estimativas probabilísticas realmente são. Os comentaristas exploram o valor das taxas-base, métricas de calibração como Brier scores e mercados de previsão, enquanto críticos argumentam que eventos raros e únicos, e sistemas complexos como guerra ou clima, são pouco adequados a esse tipo de quantificação. Outros questionam por que, se esses métodos funcionam, eles não dominam mais os mercados financeiros, e se o aparente sucesso preditivo reflete habilidade genuína ou viés de sobrevivência.
Papel das taxas-base e dos métodos de previsão
- Muitos comentários focam em “taxas-base” como âncora para previsões probabilísticas.
- Os defensores dizem que as taxas-base fornecem um prior desinformado e um teste de sanidade antes de ajustar com novas informações.
- Os críticos argumentam que algumas construções de taxas-base (por exemplo, misturar diferentes períodos históricos ou priors de Laplace arbitrários) são vagas e podem parecer numerologia.
- Vários observam que as taxas-base são apenas um ingrediente; bons previsores combinam vários modelos e análise qualitativa.
Calibração, pontuação e validação
- Surge a pergunta: como probabilidades de eventos únicos (por exemplo, “a China invade Taiwan”) podem ser validadas?
- Respostas: observe grandes conjuntos de previsões; se eventos de 8% acontecem ~8% das vezes, você está calibrado.
- Menção a Brier scores, cross-entropy e “proper scoring rules” que recompensam probabilidades honestas e correção contrária à expectativa.
- Alguns continuam céticos, argumentando que eventos geopolíticos heterogêneos e únicos são difíceis de agregar de forma significativa.
Comparação com especialistas, finanças e mercados
- Debate sobre se tais previsores deveriam estar competindo nos mercados financeiros (“grandes ligas”) se realmente forem bons.
- Respostas: mercados são diferentes (ruído, incentivos, conhecimento de domínio) e muitos previsores priorizam projetos de impacto social em vez de lucro.
- Alguns argumentam que, se as previsões têm +EV, deveriam se traduzir em trades; outros suspeitam de viés de sobrevivência ou sorte.
- Mercados de previsão são vistos como um mecanismo útil para codificar crenças e medir habilidade preditiva.
Cisnes negros, guerra nuclear e percepção de risco
- Vários argumentam que prever eventos raros e catastróficos é estruturalmente tendencioso para “não”, e subestima o impacto.
- Outros contestam que a pontuação adequada e longos históricos ainda tornam significativo estimar probabilidades baixas.
- Discussão sobre previsões de mudança climática: modelos climáticos fornecem física, mas prever emissões e políticas é mais político e incerto.
Utilidade e limites da previsão
- Alguns veem a previsão como intelectualmente gratificante e praticamente útil para políticas públicas, finanças e gestão de risco.
- Outros duvidam que os tomadores de decisão ajam com base em previsões, ou comparam a prática a horóscopos quando aplicada a eventos geopolíticos únicos.
- Alguns observam que, mesmo que as probabilidades sejam filosoficamente confusas, apostas e mercados forçam crenças coerentes e testáveis.