Como usar autorreflexão para melhorar prompts?

9.0K views
•
November 29, 2023
by
Sandeco
YouTube video player
Como usar autorreflexão para melhorar prompts?

TL;DR

Combine um agente produtor com um agente crítico e repita o ciclo de criação, análise e revisão até a resposta atender aos critérios definidos. A técnica REFLEXION usa placeholders para transportar a produção e as sugestões entre os perfis, ajudando a refinar textos, explicações, códigos e ideias, além de reduzir alucinações segundo a apresentação.

Transcript

Olá tudo bem Hoje eu vou fazer o chat GPT pensar naquilo que ele está produzindo Vou ensinar você a usar essa técnica de autorreflexão porque ela é uma técnica baseada Nesse artigo aqui né reflection a saída do chat GPT melhora em até 97% eu sou professor sandeco Macedo e você está aqui uma série sobre o chat ept com mais de 40 vídeos do básico ava... Read More

Key Insights

  • A técnica REFLEXION combina agentes produtores e críticos para revisar a saída do ChatGPT.
  • O agente inicial cria uma solução especializada com base na solicitação apresentada pelo usuário.
  • O agente de reflexão examina a produção, identifica problemas e formula sugestões de melhoria.
  • Os placeholders armazenam separadamente a produção inicial e as críticas geradas na análise.
  • O ciclo devolve as sugestões ao agente inicial para que ele produza uma versão mais refinada.
  • O processo pode ser repetido várias vezes, inclusive por uma quantidade definida no próprio prompt.
  • A estrutura pode combinar escritor e editor, explicador e avaliador ou idealizador e crítico.
  • Segundo a apresentação, a autorreflexão ajuda a reduzir alucinações em tarefas realizadas por LLMs.

Explore YouTube Video Summarizer or Get YouTube Transcript Extractor

Questions & Answers

Q: Como funciona a técnica REFLEXION no ChatGPT?

A técnica REFLEXION separa o trabalho em pelo menos dois perfis. Um agente especialista recebe a solicitação do usuário e produz uma solução inicial. Em seguida, um agente de reflexão analisa essa produção, procura problemas, reconhece aspectos positivos e cria sugestões de melhoria. As críticas retornam ao primeiro agente, que atualiza sua resposta. Esse movimento pode ser repetido várias vezes, formando um ciclo de produção, avaliação e revisão até que o crítico não encontre novas objeções e declare estar satisfeito com a ideia.

Q: Quais perfis são necessários para aplicar a autorreflexão?

A estrutura básica apresentada utiliza dois perfis: um agente responsável pela produção e outro encarregado da reflexão crítica. O primeiro deve atuar como especialista na necessidade do usuário e elaborar a resposta, ideia, explicação, texto ou código. O segundo deve examinar o resultado, apontar limitações e fornecer sugestões concretas. Os nomes podem mudar conforme a tarefa. O vídeo cita pares como escritor e editor, explicador e avaliador, além de idealizador e analisador. O importante é preservar a divisão entre criação e avaliação.

Q: Como os placeholders são usados no prompt de REFLEXION?

Os placeholders funcionam como espaços de armazenamento dentro da estrutura do prompt. Um deles recebe a produção do agente inicial, enquanto outro guarda a crítica e as sugestões formuladas pelo analisador. No exemplo apresentado, o idealizador coloca sua proposta no placeholder chamado ideia, e o analisador registra sua avaliação no placeholder chamado crítica. Essa separação permite que cada perfil consulte o conteúdo relevante e que as sugestões retornem ao produtor, sustentando o movimento circular de análise, atualização e nova avaliação.

Q: Por que repetir o ciclo de crítica e revisão?

A repetição permite que a resposta inicial seja modificada à luz de problemas que não foram considerados na primeira produção. A cada ciclo, o agente crítico examina a versão atualizada e pode identificar novas limitações ou reconhecer que certos pontos foram corrigidos. O produtor, por sua vez, incorpora as sugestões recebidas e apresenta outra versão. Segundo o vídeo, é possível solicitar diversas execuções desse ciclo sem exibir cada resultado intermediário, recebendo ao final uma produção mais trabalhada do que a primeira saída do prompt.

Q: Em quais tarefas a técnica de autorreflexão pode ser aplicada?

A técnica pode ser adaptada a diferentes tarefas de produção. Para escrever um livro ou texto, um perfil de escritor cria o capítulo e um editor sugere correções. Para explicar um conceito, um explicador produz a resposta e um avaliador verifica detalhes ausentes. Na criação de produtos, um idealizador propõe uma solução e um crítico examina sua adequação, seus custos e sua complexidade. O vídeo também menciona a escrita de código, mantendo sempre o mesmo princípio de produzir, analisar, sugerir alterações e revisar.

Q: Como montar um prompt com idealizador e analisador?

Primeiro, defina o idealizador como um profissional motivado a resolver problemas e determine que ele armazene sua proposta em um placeholder de ideia. Também instrua esse perfil a atualizar a proposta quando receber a crítica. Depois, defina o analisador como um profissional com capacidade de avaliar ideias e soluções. Ele deve consultar a ideia armazenada, produzir sugestões e registrar a avaliação em um placeholder de crítica. Por fim, carregue os dois perfis no prompt e envie a solicitação específica ao idealizador para iniciar o ciclo.

Q: Como o exemplo de produto demonstra a técnica REFLEXION?

O exemplo solicita ao idealizador um produto para pessoas de 18 a 28 anos, com custo máximo de R$ 1. O agente propõe o Smart Plant, descrito como um dispositivo compacto para cuidar de plantas, com sensor de umidade, monitoramento de luz, lembretes por aplicativo e conexão a dispositivo móvel. Depois, o analisador questiona a viabilidade do baixo custo diante dos sensores, da conexão e do desenvolvimento do aplicativo. Assim, a primeira ideia passa a ser revisada com base em restrições concretas levantadas pela crítica.

Q: Qual benefício o vídeo atribui à autorreflexão?

O vídeo atribui à autorreflexão a capacidade de melhorar progressivamente a saída do ChatGPT, pois a primeira resposta não é tratada automaticamente como resultado final. A produção passa por avaliação crítica, recebe sugestões e é atualizada em ciclos sucessivos. A apresentação também afirma que a técnica reduz bastante as alucinações em tarefas realizadas por modelos de linguagem. Além disso, menciona que o artigo citado argumenta uma assertividade de até 97% ao final das interações, embora o trecho fornecido não detalhe a medição desse resultado.

Summary & Key Takeaways

  • A técnica organiza o ChatGPT em dois perfis: um agente especialista produz a resposta inicial, enquanto um agente de reflexão identifica problemas e propõe alterações com base na solicitação do usuário.

  • A produção e as críticas são armazenadas em placeholders. Esses conteúdos circulam entre os agentes durante várias interações, permitindo que cada nova versão incorpore as sugestões anteriores.

  • O método pode apoiar escritores e editores, explicadores e avaliadores ou idealizadores e críticos. No exemplo, uma ideia de produto é examinada quanto ao custo e à complexidade tecnológica.


Read in Other Languages (beta)

Share This Summary 📚

Explore More Summaries from Sandeco 📚