AI

A Lição Amarga: O Ensaio de IA de Rich Sutton Explicado

Em 2019, um pioneiro do aprendizado por reforço escreveu um ensaio de uma página que hoje se lê como uma profecia de todo o boom da IA. Aqui está o que "A Lição Amarga" realmente diz, a história real por trás dela e a coisa desconfortável que ela lhe conta sobre como você aprende.

15 min de leitura
Pontos-chave
    • Uma frase move a IA moderna: A tese de Sutton é que "métodos gerais que aproveitam a computação são, em última análise, os mais eficazes, e por uma grande margem". A esperteza perde para a escala.
  • É um padrão de 60 anos, não um palpite: Xadrez, Go, reconhecimento de fala e visão computacional seguiram todos o mesmo arco, no qual o conhecimento humano construído à mão venceu no início e depois foi esmagado pela busca e pelo aprendizado.
  • A lição é "amarga" porque fere o especialista: Embutir o que sabemos parece satisfatório e ajuda no curto prazo, e depois estagna. Os pesquisadores odiavam perder para a "força bruta".
  • Apenas duas coisas escalam com a computação: Busca e aprendizado. Todo o resto é um gargalo humano disfarçado de insight.
  • Isso também se aplica às suas anotações: Sistemas manuais elaborados de conhecimento tendem a perder para o simples hábito de capturar tudo e deixar a busca somada à IA fazer a recuperação.
  • Até Sutton agora diz que a história não terminou: Em 2025, ele argumentou que os grandes modelos de linguagem de hoje não seguem plenamente sua própria lição, o que vale a pena entender antes de apostar nela.

A Única Frase Por Trás do Boom da IA

Em 13 de março de 2019, Richard Sutton publicou um ensaio curto em seu site pessoal. Sutton não é um vendedor de hype. Ele é um dos fundadores do aprendizado por reforço, coautor do livro-texto padrão da área e, mais tarde, ganhador do Prêmio Turing. O ensaio mal passa de uma página. Ele talvez tenha moldado mais decisões de bilhões de dólares do que qualquer livro de negócios publicado naquela década.

Sua frase de abertura é o argumento inteiro: "A maior lição que se pode extrair de 70 anos de pesquisa em IA é que métodos gerais que aproveitam a computação são, em última análise, os mais eficazes, e por uma grande margem."

Leia isso duas vezes, porque é menos óbvio do que parece. Sutton não está dizendo que a computação ajuda. Ele está dizendo que, no longo prazo, ela é a única coisa que vence de forma confiável, e que o conhecimento humano que carinhosamente construímos em nossos sistemas tende a atrapalhar. Os métodos que escalam com computação bruta vencem os métodos que codificam o que pessoas inteligentes já descobriram. Não por pouco. Por uma grande margem.

Essa afirmação soa quase anti-intelectual. Ela diz que o especialista do domínio, a pessoa que entende a estrutura especial do problema, é geralmente aquele que perde. E Sutton não argumentou isso a partir da teoria. Ele argumentou a partir de seis décadas de pesquisadores de IA cometendo o mesmo erro, vendo-o falhar e cometendo-o de novo.


Sessenta Anos, Quatro Vezes o Mesmo Erro

O poder do ensaio está em ser um padrão, não uma opinião. Sutton percorre quatro áreas nas quais o mesmo filme se repetiu.

Xadrez. Por décadas, os pesquisadores de xadrez computacional tentaram codificar o entendimento humano do xadrez: teoria de aberturas, heurísticas posicionais, a sabedoria dos grandes mestres. Então, em 1997, o Deep Blue da IBM venceu o campeão mundial Garry Kasparov usando busca massiva e profunda, avaliando centenas de milhões de posições por segundo. Ele não "entendia" xadrez da forma que um grande mestre entende. Ele buscava. As abordagens baseadas em conhecimento perderam para a antecipação bruta rodando em hardware de propósito específico.

Go. O Go deveria ser diferente. O tabuleiro é grande demais para busca por força bruta, então certamente este era o jogo em que a intuição humana continuaria essencial. Então, cerca de vinte anos depois do Deep Blue, o AlphaGo da DeepMind venceu Lee Sedol em 2016, e seu sucessor AlphaZero aprendeu Go, xadrez e shogi sobre-humanos do zero por meio de autojogo, sem nenhuma partida humana. Mesma história, mesmo final: busca somada a aprendizado venceu o conhecimento humano codificado.

Reconhecimento de fala. Lá pelos anos 1970, a DARPA promoveu uma competição de reconhecimento de fala. Um grupo usou o conhecimento humano de palavras, fonemas e do trato vocal humano. O outro usou métodos estatísticos e modelos ocultos de Markov, que faziam mais computação e sabiam menos sobre linguagem. A estatística venceu. Décadas depois, o aprendizado profundo levou a mesma lição adiante, e os sistemas modernos de fala contêm quase nenhuma linguística codificada à mão.

Visão computacional. As primeiras pesquisas em visão buscavam bordas, cantos e características inteligentes projetadas à mão, como o SIFT. Então, em 2012, uma rede neural profunda conhecida como AlexNet reduziu a taxa de erro no benchmark ImageNet de cerca de 26% para cerca de 16% em um único salto, usando convolução, GPUs e dados em vez de características projetadas por humanos. O pipeline artesanal que uma geração de pesquisadores havia refinado desapareceu em poucos anos.

ÁreaA abordagem de conhecimento humanoO que realmente venceuPonto de virada
XadrezHeurísticas de grandes mestres e livros de aberturasBusca profunda massivaDeep Blue vence Kasparov, 1997
GoIntuição humana e conhecimento de formasBusca somada a aprendizado por autojogoAlphaGo vence Lee Sedol, 2016
FalaFonética e modelos do trato vocalEstatística e modelos ocultos de MarkovCompetições da DARPA, a partir dos anos 1970
VisãoCaracterísticas projetadas à mão como o SIFTRedes neurais profundas em GPUsAlexNet no ImageNet, 2012

Quatro áreas, quatro grupos de especialistas, um resultado. A cada vez, as pessoas que entendiam melhor o problema apostaram na abordagem que perdeu.


Por Que a Chamaram de "Amarga"

Aqui está a parte que as pessoas pulam. A lição não é apenas "a computação vence". É que a vitória parece ruim, e que essa sensação ruim faz pessoas inteligentes continuarem resistindo a ela.

Quando o Deep Blue venceu com busca, observa Sutton, a reação dos pesquisadores de xadrez do campo do conhecimento humano não foi curiosidade. Foi algo mais próximo de despeito. Eles haviam construído carreiras sobre a ideia de que a maestria no xadrez exigia entendimento posicional profundo, e uma máquina que basicamente buscava acabara de envergonhar essa ideia. Nas palavras dele, eles "não eram bons perdedores".

O padrão tem uma lógica emocional. Construir seu próprio conhecimento em um sistema é satisfatório. Faz o sistema funcionar melhor hoje e faz você sentir que a melhoria veio do seu insight. Essa recompensa de curto prazo é real, o que é exatamente por que ela é uma armadilha. Você é recompensado agora justamente pela jogada que estagna mais tarde.

O resumo que Sutton faz do ciclo vale a pena manter na cabeça:

  • Os pesquisadores constroem conhecimento humano em seus sistemas.
  • Isso ajuda, e parece bom, no curto prazo.
  • Com o tempo, estagna e pode até bloquear ativamente o progresso adicional.
  • O avanço acaba vindo da direção oposta: escalar a computação por meio de busca e aprendizado.

A lição é amarga porque nunca deixa de ser tentador ignorá-la. Cada nova área chega convencida de que desta vez o insight humano é essencial, de que este problema é especial. Até agora, essa convicção tem um histórico de derrotas.


Busca e Aprendizado: As Únicas Duas Coisas Que Escalam

Se o conhecimento humano é a coisa que estagna, qual é a coisa que não estagna? Sutton nomeia exatamente duas: busca e aprendizado.

Ambas compartilham uma propriedade rara. Elas melhoram quando você joga mais computação nelas, e continuam melhorando. A busca explora mais possibilidades por segundo à medida que o hardware melhora. O aprendizado extrai mais estrutura de mais dados à medida que os modelos e a computação crescem. Nenhuma delas depende de um humano já ter descoberto a resposta, e é por isso que nenhuma delas atinge o mesmo teto.

É aqui que o argumento de Sutton se torna filosófico, e onde vive sua melhor frase. A razão para parar de codificar conhecimento à mão, ele escreve, é que "os conteúdos reais das mentes são tremendamente, irremediavelmente complexos". A forma como pensamos sobre espaço, objetos, outros agentes e simetria é muito mais bagunçada do que qualquer regra arrumada que pudéssemos escrever. Então, quando tentamos comprimir nosso entendimento em um sistema, estamos enviando uma caricatura com perdas e simplificada demais da inteligência real.

Sua prescrição decorre disso diretamente. Não tente embutir os conteúdos do pensamento. Embuta os metamétodos que conseguem encontrar essa complexidade por conta própria. Como ele coloca, queremos agentes de IA "que possam descobrir como nós descobrimos, não que contenham o que nós descobrimos". Dê ao sistema a capacidade de buscar e de aprender, depois saia do caminho e deixe a escala fazer o trabalho que você nunca faria à mão.

Para qualquer um que se importe com conhecimento, essa nova perspectiva é maior do que a IA. Ela sugere que a jogada de maior alavancagem não é enfiar mais respostas prontas na sua cabeça. É construir um sistema que consiga continuar descobrindo. Essa ideia se conecta diretamente ao motivo pelo qual o conhecimento compõe como juros quando você o configura para continuar crescendo.


A Prova Moderna: Leis de Escala e Autojogo

A razão pela qual o ensaio de 2019 se lê como profecia é que os anos logo depois dele se transformaram em uma longa confirmação.

Em 2020, uma equipe liderada por Jared Kaplan publicou "Scaling Laws for Neural Language Models", mostrando que o desempenho de um modelo melhora como uma suave lei de potência à medida que você aumenta o tamanho do modelo, os dados e a computação. Maior e mais, consistentemente, significavam melhor, ao longo de ordens de magnitude. Esse artigo se tornou a licença intelectual para toda a corrida por escalar grandes modelos de linguagem. Em 2022, o trabalho Chinchilla da DeepMind refinou a receita, mostrando que muitos modelos haviam sido subtreinados em dados em relação ao seu tamanho, e reequilibrou a proporção.

O fio condutor do Deep Blue ao GPT é a mesma lição vestindo roupas novas. O AlphaZero aprendeu jogo de nível mundial apenas com autojogo, sem exigir registros de partidas humanas, o que é busca e aprendizado no volume máximo. Os modelos de linguagem aprenderam uma competência impressionante não a partir de regras de gramática e raciocínio escritas à mão, mas prevendo o próximo token através de um oceano de texto com orçamentos enormes de computação. Todo laboratório que apostou na escala em vez da esperteza, da OpenAI à DeepMind e à Anthropic, estava, quer o citasse ou não, executando o roteiro de Sutton.

O motor de composição por baixo de tudo isso é o crescimento exponencial da computação disponível. Todo o argumento de Sutton se apoia na suposição de que a computação continua ficando mais barata, então qualquer método que consiga absorver mais dela acaba vencendo. Isso é um parente próximo dos retornos superlineares que Paul Graham descreve nas startups: escolha aquilo que compõe, e o tempo faz o trabalho pesado.


Onde a Lição Amarga Contra-Ataca

Um bom texto explicativo precisa dizer onde a ideia é contestada, porque ela é. Tratar "A Lição Amarga" como evangelho é um tipo próprio de erro.

A refutação mais citada veio rápido. Em março de 2019, o roboticista Rodney Brooks publicou "A Better Lesson". Seu argumento: o campo do conhecimento humano não está de fato morto, apenas se mudou. As redes neurais convolucionais que "venceram" a visão computacional têm invariância translacional embutida por projetistas humanos. Arquiteturas de modelos, tokenizadores e configurações de treinamento estão cheios de premissas humanas. Não removemos a esperteza humana, argumentou Brooks. Nós a realocamos para a estrutura da máquina de aprendizado e paramos de notar. Outros acrescentaram que a lei de Moore está desacelerando, então "é só adicionar computação" não é de graça para sempre.

Então, a reviravolta mais estranha de todas: o próprio Sutton. Em 2025, no ensaio "Welcome to the Era of Experience" com David Silver e em uma entrevista muito comentada no podcast de Dwarkesh Patel naquele setembro, Sutton argumentou que os grandes modelos de linguagem de hoje não satisfazem de fato a lição amarga. Os LLMs aprendem imitando uma pilha fixa de texto humano, o que ele chamou de aprendizado por mímica em vez de aprendizado pela experiência. A inteligência real, em sua visão mais recente, vem de agentes que aprendem continuamente a partir de sua própria interação com o mundo, não de prever a próxima palavra humana. O pai da lição amarga olhou para a era dos LLMs e disse, na prática, que isso ainda tem conhecimento humano demais dentro.

Então a leitura honesta é em camadas. A afirmação central, de que busca e aprendizado escaláveis vencem o conhecimento codificado à mão, tem um histórico extraordinário. Mas "qual método escala melhor" ainda é uma briga em aberto, e a pessoa que escreveu o ensaio acha que o campeão atual é uma parada no caminho, não o destino. Segurar as duas ideias ao mesmo tempo é a marca de quem realmente a entende, o tipo de pensamento em trade-offs que uma boa amplitude entre áreas tende a produzir.


A Lição Amarga de Fazer Anotações

Agora a parte que não é sobre IA de forma alguma. A lição amarga tem uma versão para o conhecimento pessoal, e uma vez que você a vê, não consegue mais deixar de vê-la.

Olhe como a maioria das pessoas tenta ficar mais inteligente. Elas constroem sistemas elaborados. Hierarquias de pastas aninhadas. Taxonomias intrincadas de tags. Códigos de cores, modelos, uma ontologia perfeita para onde cada ideia deveria morar. Esta é a abordagem do conhecimento humano aplicada ao seu próprio cérebro. Parece produtiva. Organizar é satisfatório exatamente da forma que Sutton alerta, e ajuda um pouco no início. Depois estagna, porque o sistema exige mais esforço para manter do que jamais devolve, e a maioria das pessoas silenciosamente o abandona.

A alternativa escalável espelha a busca e o aprendizado. Capture muito, com quase nenhuma estrutura prévia, e deixe a recuperação fazer a organização depois. Em vez de pré-decidir onde um destaque pertence, salve tudo e conte com a busca de texto completo e a IA para trazer à tona a coisa certa quando você precisar. Você aposta em volume somado a boa recuperação em vez de arquivamento manual inteligente. Esse é o eco pessoal de "métodos gerais que aproveitam a computação".

AbordagemEstilo de conhecimento humanoEstilo escalável
OrganizarPastas e taxonomias de tags elaboradas decididas de antemãoCapturar tudo, organizar no momento da recuperação
Curva de esforçoAlta manutenção, ajuda no início, estagnaBaixo atrito, compõe conforme o corpus cresce
Encontrar coisasLembrar onde você arquivouBusca e IA trazem à tona sob demanda
Modo de falhaO sistema colapsa, você o abandonaFunciona melhor quanto mais você salva

É por isso que um hábito de destacar vence um hábito de arquivar. Quando você usa o destacador web da Glasp para marcar o que importa enquanto lê, ou salva resumos de vídeos do YouTube e destaques de transcrições de palestras e aulas, você está construindo o corpus. O volume é o ponto. Então o chat de IA da Glasp faz o papel de busca e aprendizado, permitindo que você faça perguntas por tudo o que salvou em vez de lembrar manualmente onde cada ideia mora. Você fornece o metamétodo, a captura, e deixa a escala cuidar do resto.

Isso também reformula um sentimento de culpa que a maioria dos leitores conhece bem. Um enorme acúmulo de material salvo mas não lido não é fracasso, é computação bruta para depois. Fizemos a defesa completa disso em por que salvar agora e nunca ler ainda deixa você mais inteligente. A lição amarga concorda: um corpus grande e bagunçado somado a boa recuperação vence um pequeno e perfeitamente curado.


Como Aplicá-la ao Seu Próprio Aprendizado

O ensaio é sobre máquinas, mas o conselho operacional para humanos é surpreendentemente concreto.

Pare de superprojetar o sistema. As horas que você gasta aperfeiçoando seu esquema de tags são a versão de anotações de codificar heurísticas de xadrez à mão. Satisfatório, e um platô. Mantenha a estrutura leve o suficiente para que você realmente continue a usá-la.

Reduza o custo da captura para quase zero. Métodos escaláveis vencem em parte porque são baratos de alimentar. Faça de salvar um destaque, uma citação ou um resumo um reflexo de um clique, para que o atrito nunca o convença a desistir. Um fluxo de smart notes funciona melhor quando a captura é sem esforço e a conexão acontece depois.

Invista na recuperação, não no arquivamento. Sua alavancagem está em quão bem você consegue encontrar e recombinar o que salvou, não em quão organizadamente o guardou. Busca, chat de IA sobre suas próprias anotações e boas ligações vencem qualquer árvore de pastas.

Aposte na composição, não em terminar. Você nunca vai "terminar" de aprender uma área, e a lição amarga diz que você também não deveria tentar embutir uma resposta final. Construa o hábito que continua descobrindo. Um corpus que cresce um pouco todo dia silenciosamente cruza limiares que você não consegue prever.

Continue generalista quanto aos métodos. A jogada mais profunda da lição é a humildade intelectual: presuma que seu melhor insight atual será superado pela escala e projete para isso. Mantenha suas entradas amplas. A vantagem mais durável é ser a pessoa que continua aprendendo, o que se conecta ao contexto que você acumula ao longo do tempo tornando-se sua verdadeira vantagem.

O ponto meta é simples. Seja o metamétodo. Não tente ser o sistema especialista pronto, codificado à mão. Seja a coisa que continua buscando e continua aprendendo, e deixe o volume somado à boa recuperação compor a seu favor.


Perguntas Frequentes

O que é a lição amarga em termos simples?

É a observação, do ensaio de 2019 de Richard Sutton, de que na IA as abordagens que vencem ao longo do tempo são as que usam mais computação por meio de busca e aprendizado, não as que codificam a expertise humana à mão no sistema. A esperteza ajuda no curto prazo e depois estagna; a escala continua melhorando. É "amarga" porque significa que o conhecimento cuidadosamente construído pelo especialista geralmente perde.

Quem é Richard Sutton e por que ele importa?

Richard Sutton é um cientista da computação amplamente reconhecido como fundador do aprendizado por reforço, coautor do livro-texto padrão da área com Andrew Barto e ganhador do Prêmio Turing. Quando ele escreve uma página sobre a direção da IA, a área inteira a lê, porque ele ajudou a construir os métodos dos quais o boom moderno da IA depende.

A lição amarga é de fato verdadeira?

O padrão histórico é forte: xadrez, Go, reconhecimento de fala e visão computacional a seguiram todos, e as leis de escala para modelos de linguagem a estenderam. Mas ela é debatida. Rodney Brooks argumentou que o conhecimento humano apenas se mudou para as arquiteturas dos modelos em vez de desaparecer, e em 2025 o próprio Sutton argumentou que os grandes modelos de linguagem de hoje não seguem plenamente a lição porque imitam texto humano em vez de aprender da experiência real.

A lição amarga significa que o conhecimento humano é inútil?

Não. Significa que o conhecimento humano tende a perder como forma de codificar a resposta final em um sistema. Os humanos ainda escolhem o problema, projetam os metamétodos, constroem as configurações de treinamento e decidem o que escalar. A lição é sobre onde colocar seu esforço: em métodos escaláveis e boa estrutura, não em congelar o entendimento de hoje na máquina.

Como a lição amarga se aplica a fazer anotações e ao aprendizado?

Ela sugere que sistemas manuais elaborados de organização se comportam como expertise codificada à mão: satisfatórios no início, depois um fardo de manutenção que estagna. A alternativa escalável é capturar muito com estrutura mínima e contar com a busca e a IA para a recuperação. Construa o corpus com ferramentas como um destacador web e deixe a recuperação, não o arquivamento, fazer o trabalho.


Conclusão: Aposte no Que Compõe

"A Lição Amarga" é uma página que silenciosamente explica uma década de IA, e que cai como um alerta sobre como qualquer um de nós tenta ficar mais inteligente. A jogada sedutora é sempre codificar o que você já sabe e chamar isso de progresso. A jogada durável é construir algo que continua buscando e continua aprendendo, e depois alimentá-lo com escala.

Você não consegue superar em computação um data center, mas consegue copiar a estratégia. Capture mais do que parece arrumado. Mantenha a estrutura leve. Coloque sua energia na recuperação e deixe um corpo crescente de destaques, anotações e resumos compor ao longo de anos. Essa é a versão pessoal de aproveitar a computação, e ela vence um sistema perfeitamente organizado que você para de usar em março.

Comece a construir seu corpus com o destacador web da Glasp e o YouTube Summary, depois deixe o chat de IA da Glasp buscar e aprender por tudo o que você salvou. Seja o metamétodo. Deixe a escala fazer o resto.

Start building your knowledge library

Highlight what matters as you read across the web. Save insights from articles, books, and YouTube videos in one place.

Get Started Free