O Livro que Tornou a Previsão uma Habilidade Mensurável
Em 2011, a Intelligence Advanced Research Projects Activity, um braço de pesquisa da comunidade de inteligência dos EUA, promoveu uma competição peculiar. Ela queria saber se alguém era realmente capaz de prever eventos mundiais, então convidou equipes universitárias a competir. Cada equipe recrutou voluntários para responder a centenas de perguntas geopolíticas difíceis com probabilidades numéricas: este país vai dar calote? Estas duas nações vão entrar em guerra? Este líder ainda estará no poder daqui a seis meses?
Philip Tetlock e Barbara Mellers comandaram uma dessas equipes, o Good Judgment Project. Ao longo de quatro anos, milhares de voluntários online fizeram mais de um milhão de previsões em cerca de 500 perguntas. Os resultados envergonharam os profissionais. O Good Judgment superou as outras equipes universitárias por margens de 35 a 72 por cento em precisão, e seus melhores forecasters foram cerca de 30 por cento mais precisos do que analistas de inteligência que tinham acesso a informações sigilosas que os voluntários nunca viram.
O livro que Tetlock escreveu com o jornalista Dan Gardner, Superforecasting: The Art and Science of Prediction (2015), é a história dessas pessoas e do que as tornou boas. Uma delas, um programador de computador aposentado chamado Doug Lorch, fez cerca de mil previsões só no primeiro ano e terminou em quinto lugar entre cerca de 2.800 competidores. Ele não era espião nem quant. Era um hobbista que tinha encontrado um sistema que funcionava.
A maioria das pessoas lê Superforecasting para ficar melhor em prever mercados ou política. Este guia o trata como algo mais útil para um leitor: um manual de treinamento para o julgamento. A habilidade que Tetlock isola, pensar com clareza sobre um futuro incerto, é a mesma que você usa toda vez que decide no que acreditar, em quais fontes confiar e o que fazer com aquilo que aprende.
Por que a Maioria das Previsões de Especialistas Falha
Tetlock conquistou o direito de escrever este livro do jeito difícil. Seu trabalho anterior, Expert Political Judgment (2005), acompanhou centenas de comentaristas e analistas profissionais fazendo dezenas de milhares de previsões ao longo de cerca de vinte anos. O veredito famoso: o especialista médio era mais ou menos tão preciso quanto "um chimpanzé jogando dardos". Pior, quanto mais famoso o especialista, pior tendia a ser a calibração, porque histórias confiantes e generalizantes levam você à televisão, enquanto ressalvas cuidadosas não.
Mas as médias escondiam uma divisão. Tomando emprestada a metáfora de Isaiah Berlin, Tetlock separou os forecasters em porcos-espinhos e raposas. O porco-espinho sabe uma grande coisa e força toda pergunta a passar por uma única grande teoria. A raposa sabe muitas coisas pequenas, desconfia de grandes teorias e costura evidências de muitas fontes. As raposas previam melhor de forma consistente. Os porcos-espinhos faziam previsões mais ousadas e chamavam mais atenção, mas sua única grande ideia insistia em conduzi-los a erros confiantes.
A lição não é que a expertise seja inútil. É que ser conhecedor e ser bem calibrado são habilidades diferentes. Saber muito sobre um tema diz o que poderia acontecer. Não diz automaticamente qual a probabilidade de cada desfecho, e probabilidade é do que uma previsão de fato trata. Essa lacuna é a razão pela qual pessoas inteligentes e informadas erram com tanta frequência e tanta confiança, um padrão que Daniel Kahneman passou uma carreira documentando em como aplicar Rápido e Devagar.
O que de Fato Faz um Superforecaster
O palpite óbvio é a inteligência. Os superforecasters de fato pontuaram acima da média em testes de inteligência e conhecimento, mais ou menos entre os 20 por cento do topo, mas não eram outliers. Muita gente muito inteligente prevê mal, e muita gente apenas esperta se destacou. O QI estabelece um piso, não um teto.
O que separou os melhores foi um hábito de pensamento que Tetlock chama de "beta perpétuo", tomando emprestado o termo de software para um produto que nunca está pronto e sempre está sendo aprimorado. Os superforecasters tratam toda crença como um rascunho. Eles ativamente caçam razões pelas quais podem estar errados, revisam em pequenos passos à medida que a evidência pinga e fazem análises pós-morte honestas de seus erros. Tetlock descobriu que esse compromisso com atualizar e se aprimorar era um preditor de precisão cerca de três vezes mais poderoso do que a própria inteligência.
As próprias pessoas eram nada notáveis no papel. Bill Flack, um dos forecasters de destaque, era um funcionário aposentado do Departamento de Agricultura dos EUA, de Nebraska, que gostava de observar pássaros. Outros chegaram a isso depois de um erro doloroso: alguns entraram no projeto justamente porque não tinham visto algo chegando, como a crise financeira de 2008, e queriam melhorar. Essa é a mentalidade de crescimento que Carol Dweck descreve em como aplicar Mindset, direcionada a uma única habilidade treinável. A implicação reconfortante do livro inteiro é que o superforecasting é comportamento aprendido, não uma personalidade sem a qual você fica preso.
Fermi-ize a Pergunta e Comece pelo Lado de Fora
Diante de uma pergunta grande e vaga, a maioria das pessoas recorre ao instinto e a uma manchete. Os superforecasters fazem o oposto. Eles quebram a pergunta em subperguntas menores, cada uma mais fácil de raciocinar, uma técnica que Tetlock chama de "Fermi-izar" em homenagem ao físico Enrico Fermi, que era famoso por estimar quantidades difíceis (como o número de afinadores de piano em Chicago) decompondo-as. O objetivo de despedaçar um problema é separar o que você de fato sabe do que você está adivinhando, ou, como Tetlock coloca, "trazer a ignorância à tona".
O próximo movimento é contraintuitivo: comece pelo lado de fora, não pelo de dentro. A visão de dentro é a história específica diante de você, com todos os seus detalhes vívidos. A visão de fora faz uma pergunta mais fria: com que frequência coisas assim acontecem em situações assim? Essa taxa-base é sua âncora. Se você quer prever se uma startup ainda existirá daqui a cinco anos, você não começa pelo quão inspirador é o fundador. Você começa pela taxa de sobrevivência das startups em geral e depois ajusta para cima ou para baixo conforme o que é genuinamente especial nesta.
Acertar a ordem importa. Ancore primeiro na história vívida de dentro e todo ajuste fica contaminado por ela. Ancore primeiro na taxa-base e os detalhes se tornam correções a um ponto de partida sensato, em vez de a base inteira do seu palpite. É o mesmo instinto de raposa, amplitude antes de profundidade, que como aplicar Range argumenta tornar os generalistas tão eficazes em domínios imprevisíveis.
Pense em Probabilidades, Não em Palavras
A linguagem comum é onde as previsões vão morrer. "Há uma chance real de recessão" parece uma afirmação, mas não pode ser pontuada, então nunca pode estar errada, então você nunca pode aprender com ela. Estudos sobre palavras de probabilidade vaga mostram o problema com clareza: quando se pergunta às pessoas o que "uma possibilidade real" significa numericamente, as respostas variam de cerca de 20 por cento a mais de 80 por cento. Cada um ouve o próprio número.
Os superforecasters se recusam a se esconder ali. Eles traduzem palpites em probabilidades específicas e usam gradações finas, 63 por cento em vez de um arredondado "provável". Essa precisão não é falsa confiança, é o oposto. Tetlock descobriu que, quando os pesquisadores arredondavam as estimativas dos superforecasters para números mais grosseiros, a precisão deles caía, o que significa que essas pequenas distinções carregavam informação real. A ferramenta para manter o placar é o Brier score, que mede tanto a calibração (as coisas que você chama de 70 por cento acontecem cerca de 70 por cento das vezes?) quanto a resolução (você assume posições decisivas em vez de se esconder no 50 por cento?). Quanto menor, melhor.
| Estilo de previsão | Como soa | Dá para aprender com isso? |
|---|---|---|
| Palavras vagas | "Provavelmente", "uma chance real", "improvável" | Não, não pode ser pontuado |
| Números redondos | "Cerca de 70 por cento" | Um pouco, mas de forma grosseira |
| Probabilidades de grão fino | "63 por cento, e eis o porquê" | Sim, a calibração melhora com o tempo |
Os números fazem algo que as palavras não conseguem: transformam uma previsão em feedback. Diga "70 por cento" cem vezes e você pode conferir se cerca de 70 dessas coisas aconteceram. Diga "provavelmente" cem vezes e você não aprendeu nada sobre si mesmo.
Atualize suas Crenças como um Bayesiano
Uma previsão feita uma vez e defendida para sempre é apenas uma opinião. O coração do método é a atualização: ajustar sua probabilidade à medida que novas evidências chegam, na proporção do quanto essa evidência de fato lhe diz. Isso é raciocínio bayesiano em espírito, e os superforecasters o fazem constantemente, em pequenos incrementos, sem drama.
A disciplina corta nos dois sentidos. A subreação é se agarrar a uma previsão anterior porque você está ancorado, envolvido ou com vergonha de mudar. A sobrerreação é dar saltos para um número novo toda vez que surge uma manchete fresca, tratando ruído como sinal. A habilidade é calibrar o tamanho da atualização ao peso da evidência: uma notícia menor te move alguns pontos, uma surpresa genuína te move muito. Os superforecasters eram nitidamente melhores em ambos, mudando de ideia com mais frequência do que os forecasters médios, mas também com mais precisão.
O que torna isso difícil não é a matemática, é o ego. Atualizar significa admitir publicamente que sua última previsão era menos que perfeita, e a maioria das pessoas prefere ser consistente a ser precisa. A solução é parar de tratar uma mudança de ideia como uma derrota. Annie Duke enquadra o mesmo movimento como separar suas crenças da sua identidade em como aplicar Thinking in Bets: a pergunta nunca é "eu estava certo", é "no que eu acredito agora, dado tudo o que sei hoje".
Construa uma Prática de Previsão que Você de Fato Mantenha
Tudo acima desmorona sem um registro. Se você não anota o que previu, quando e por quê, a memória silenciosamente reescreve a história para que você sempre tenha estado basicamente certo. A coisa mais prática que você pode tirar de Superforecasting é um diário de previsões, e os Dez Mandamentos de Tetlock são o checklist que entra nele.
| Mandamento | O que significa na prática |
|---|---|
| Triagem | Gaste esforço em perguntas em que o trabalho de fato compensa, não nas triviais ou nas impossíveis |
| Decomponha os problemas | Fermi-ize: divida uma pergunta grande em pedaços respondíveis |
| Equilibre as visões de fora e de dentro | Comece pelas taxas-base, depois ajuste para as especificidades |
| Atualize suas crenças | Revise em passos pequenos, ponderados pela evidência |
| Procure forças causais em conflito | Mantenha explicações concorrentes em mente ao mesmo tempo |
| Use o grau certo de dúvida | Traduza palpites em probabilidades precisas |
| Equilibre prudência e decisão | Não corra para a certeza nem se esconda no "talvez" |
| Aprenda com o fracasso e o sucesso | Faça análises pós-morte sem piscar em ambos |
| Domine a tomada de perspectiva em equipes | Discorde de forma produtiva, faça perguntas precisas |
| Pratique deliberadamente com feedback | Trate a previsão como um ofício treinável |
Tetlock acrescenta um décimo primeiro mandamento, meio de brincadeira: não trate os mandamentos como mandamentos. Eles são diretrizes para um mundo bagunçado, não leis.
Aqui é onde suas ferramentas de leitura viram ferramentas de previsão. Quando você lê uma análise ou assiste a um briefing e ele faz uma afirmação sobre o futuro, capture-a. Com o destacador web do Glasp você pode destacar a previsão exata e adicionar sua própria probabilidade como uma nota, ali mesmo na fonte. Para longos argumentos em vídeo, os resumos de vídeos do YouTube permitem extrair as afirmações principais e marcá-las por timestamp para que você registre uma previsão contra cada uma. Ao longo de meses, essas anotações se tornam um histórico pesquisável, e o chat de IA do Glasp pode ajudar você a revisar seu próprio raciocínio fazendo perguntas sobre tudo o que você salvou. O hábito de registrar uma probabilidade toda vez que você encontra uma afirmação é a versão do lado da leitura de manter o placar, e ele combina naturalmente com a abordagem do livro de lugares-comuns digital para coletar o que você aprende.
Os Limites Honestos do Superforecasting
O superforecasting não é mágica, e Tetlock é cuidadoso com seus limites. As perguntas do torneio tinham datas de resolução claras e respostas definidas, geralmente dentro de um ou dois anos. Essa é exatamente a zona em que o método brilha e exatamente onde a maioria das maiores perguntas da vida não vive. Pergunte "haverá uma guerra na próxima década" e não existe um jeito limpo de pontuar isso, nenhum feedback rápido e nenhuma forma de praticar.
A crítica mais afiada vem de Nassim Taleb, que argumenta que os eventos que de fato remodelam o mundo são os raros "cisnes negros" de alto impacto que esses torneios sistematicamente excluem. Estar bem calibrado em centenas de perguntas comuns, diria ele, diz pouco sobre o único evento de cauda que realmente importa. A réplica razoável de Tetlock é que a habilidade de previsão de curto prazo e a humildade de longo prazo podem coexistir: acertar as perguntas conhecíveis vale a pena mesmo que as incognoscíveis permaneçam incognoscíveis.
Há também uma armadilha mais sutil. A pontuação pode puxar você para perguntas seguras e de curto prazo em que você vai parecer bem, e para longe das vagas e importantes em que o julgamento mais importa. O método é uma ferramenta para um tipo específico de pergunta, não uma visão de mundo. Bem usado, ele afia seu pensamento. Mal usado, ele vira um jeito de se sentir preciso sobre coisas que não contam.
Perguntas Frequentes
O superforecasting é algo com que você nasce ou que se aprende?
Aprende-se. Essa é a descoberta central do livro. Os superforecasters pontuaram acima da média em inteligência, mas não eram gênios, e o preditor mais forte da habilidade não foi o QI, e sim o "beta perpétuo", o hábito de constantemente atualizar e aprimorar suas crenças. Tetlock descobriu que ele era cerca de três vezes mais preditivo de precisão do que a inteligência. Nos experimentos de treinamento do torneio, até um tutorial curto sobre técnicas como taxas-base melhorou de forma mensurável os forecasters comuns.
Como o Superforecasting difere de Thinking in Bets?
Eles são complementares. Thinking in Bets, de Annie Duke, foca na qualidade da decisão sob incerteza e em separar boas decisões de desfechos de sorte. Superforecasting, de Tetlock, foca na previsão em si: como atribuir probabilidades precisas a eventos futuros e medir se você estava calibrado. Um é sobre decidir bem, o outro sobre enxergar com clareza. Lidos juntos, cobrem as duas metades do raciocínio sob incerteza.
O que é um Brier score em termos simples?
É um jeito de dar nota a previsões probabilísticas, em que quanto menor melhor e zero é perfeito. Ele recompensa duas coisas ao mesmo tempo: calibração (as coisas que você chama de 70 por cento devem acontecer cerca de 70 por cento das vezes) e resolução (assumir posições decisivas em vez de sempre se resguardar perto dos 50 por cento). Você precisa de um registro contínuo de previsões e resultados para calculá-lo, e é por isso que manter um diário de previsões é a base de toda a prática.
Preciso de matemática para me tornar um forecaster melhor?
Nenhuma matemática avançada é necessária. Os movimentos centrais são hábitos: quebre uma pergunta em partes, comece por uma taxa-base, expresse sua visão como um número específico e atualize em pequenos passos à medida que a evidência chega. A atualização bayesiana é uma mentalidade antes de ser uma equação. O verdadeiro gargalo não é o cálculo, é a disposição de anotar suas previsões, conferi-las honestamente e mudar de ideia.
Como começo a praticar hoje?
Escolha um punhado de perguntas com uma resposta clara e um prazo próximo, do seu trabalho, da sua leitura ou das notícias. Anote uma probabilidade específica para cada uma e uma frase sobre seu raciocínio. Quando cada uma se resolver, compare e faça uma breve análise pós-morte. Destacar previsões enquanto você lê, com uma probabilidade anexada na margem, transforma sua leitura normal em um fluxo constante de perguntas de prática.
Conclusão
O radicalismo silencioso de Superforecasting é o seu otimismo. Por décadas, a conclusão do trabalho de Tetlock foi cínica: os especialistas não conseguem prever, então por que se dar ao trabalho. O torneio virou isso do avesso. Um grupo de pessoas comuns, munidas de um método e da disciplina de manter o placar, aprendeu a enxergar o futuro com mais clareza do que profissionais com arquivos secretos. O método é ensinável, e a maior parte dele se resume a hábitos que qualquer leitor cuidadoso pode construir.
Comece pequeno. Despedace as perguntas, ancore em com que frequência coisas assim costumam acontecer, coloque um número real na sua crença e atualize-a sem ego à medida que o mundo responde. Então, o crucial: anote. Use o destacador web do Glasp para capturar as afirmações que você encontra enquanto lê e marque cada uma com sua própria probabilidade, apoie-se nos resumos de vídeos do YouTube para registrar previsões contra os argumentos que você assiste, e deixe o feed da comunidade do Glasp mostrar a você como outros leitores cuidadosos raciocinam sobre a mesma incerteza. Prever bem é uma habilidade. Como toda habilidade que vale a pena ter, ela cresce a partir da prática deliberada, do feedback honesto e de um registro com o qual você de fato pode aprender. Para o sistema de anotações que sustenta tudo isso, veja como fazer anotações inteligentes.