Como depurar prompts e conferir sua interpretação

1.9K views
•
August 1, 2023
by
Sandeco
YouTube video player
Como depurar prompts e conferir sua interpretação

TL;DR

Para conferir a interpretação de um prompt, coloque seu texto entre as tags <prompt> e </prompt> e peça ao ChatGPT que descreva as ações previstas, acrescentando a instrução explícita de não executar nenhuma ação. Compare a lista obtida com seu objetivo e, se houver diferenças nas tarefas ou na sequência, ajuste o prompt e repita a análise antes de utilizá-lo.

Transcript

Olá pessoal tudo bem com vocês hoje vai ser bem rapidinho eu cheguei da Campus Party ontem né na Campus Party Brasil sou o sandeco Macedo Sou professor e pesquisador Nardi Inteligência Artificial e também sou baixador da Campus Party Estamos fazendo aqui essa série sobre chat GPT hoje eu vou mostrar uma coisa interessante demais para vocês é o segu... Read More

Key Insights

  • A depuração de prompts permite conferir as ações interpretadas antes de solicitar sua execução.
  • As tags <prompt> e </prompt> delimitam o texto que será submetido à análise do assistente.
  • O pedido de análise solicita a descrição das ações que um assistente de IA deveria executar.
  • A instrução explícita de não executar nenhuma ação acompanha o pedido de descrição do prompt.
  • A lista produzida permite verificar se as tarefas descritas correspondem ao objetivo do usuário.
  • A sequência das ações também pode ser conferida e corrigida por meio de alterações no prompt.
  • O exemplo de criador de prompts começa perguntando ao usuário sobre o conteúdo e o propósito.
  • O refinamento do exemplo continua com respostas adicionais até atender às necessidades do usuário.

Explore YouTube Video Summarizer or Get YouTube Transcript Extractor

Questions & Answers

Q: Como conferir se o ChatGPT interpretou um prompt conforme o objetivo do usuário?

A técnica apresentada consiste em solicitar uma descrição das ações previstas no prompt antes de pedir sua execução. O usuário coloca o texto entre as tags <prompt> e </prompt> e, fora desse trecho, pede que o assistente descreva as ações que um assistente de inteligência artificial deveria executar com base nele. Também acrescenta a instrução explícita de não executar nenhuma ação. A resposta apresenta uma lista que pode ser comparada com o objetivo original. Se as tarefas ou sua sequência estiverem diferentes do esperado, o usuário modifica o texto e repete a análise.

Q: Como montar o pedido de depuração de um prompt?

O pedido de depuração reúne o prompt delimitado e uma instrução para analisar suas ações. Primeiro, o usuário insere o texto que deseja revisar entre <prompt> e </prompt>. Depois, solicita que, com base no conteúdo delimitado, o assistente descreva as ações que um assistente de inteligência artificial deve executar. Por fim, escreve explicitamente que nenhuma ação deve ser executada. Esse é o procedimento usado na demonstração para obter uma descrição do comportamento solicitado. O resultado serve para conferir as tarefas previstas e avaliar se o texto expressa aquilo que o usuário deseja.

Q: Para que servem as tags <prompt> e </prompt> na técnica demonstrada?

As tags <prompt> e </prompt> delimitam o texto que será analisado durante a depuração. Na demonstração, o apresentador coloca entre elas todo o prompt de um criador interativo de prompts, incluindo o papel definido para o assistente, seus objetivos e as atividades solicitadas. O pedido de análise faz referência ao conteúdo delimitado por essas tags. Assim, o usuário indica qual trecho deve ser lido para produzir a descrição das ações previstas. A instrução adicional de não executar nenhuma ação completa o pedido, que busca uma listagem para revisão antes do uso do prompt.

Q: Por que incluir a instrução de não executar nenhuma ação ao revisar um prompt?

A instrução de não executar nenhuma ação é incluída para deixar explícito que o pedido atual consiste em descrever o comportamento previsto pelo prompt. O apresentador quer que o ChatGPT leia o texto e liste o que um assistente deveria fazer, permitindo que o usuário confira essa interpretação antes da execução. Na demonstração, essa orientação aparece junto do pedido de descrição das ações. A lista resultante permite verificar o papel solicitado, as perguntas iniciais, as seções da resposta e a continuidade do processo. Essa revisão fornece elementos para corrigir o prompt quando necessário.

Q: Quais ações aparecem na análise do criador interativo de prompts usado como exemplo?

No exemplo, o assistente deve assumir o papel de criador de prompts para o usuário. A atividade começa com uma pergunta sobre o conteúdo e o propósito do prompt desejado. Com base na resposta, o assistente deve apresentar as seções de prompt revisado, sugestões e perguntas. As perguntas relevantes têm a função de coletar informações adicionais para aprimorar o texto. O processo continua de maneira interativa, atualizando o prompt revisado conforme as novas respostas do usuário, até que o prompt esteja completo e atenda adequadamente às necessidades apresentadas. O apresentador confirma que essa descrição corresponde ao comportamento pretendido.

Q: Como corrigir um prompt quando a lista de ações apresenta uma interpretação indesejada?

O procedimento indicado é comparar as ações listadas com aquilo que o usuário realmente quer que o assistente faça. O apresentador menciona que essa comparação pode revelar uma tarefa indesejada ou uma sequência incorreta. Quando isso ocorrer, o usuário altera o próprio prompt e executa novamente o pedido de depuração para conferir a nova descrição. A revisão continua usando o texto delimitado e a instrução de não executar nenhuma ação. Dessa forma, o usuário consegue examinar o efeito das alterações sobre as tarefas descritas antes de solicitar que o assistente realize o trabalho pretendido.

Q: Qual é a relação entre depuração de código e depuração de prompts apresentada na explicação?

A explicação aproxima a depuração de prompts da prática de examinar um código passo a passo antes de executá-lo de uma vez. No caso demonstrado, o material examinado é um conjunto de instruções escrito como prompt. O usuário pede uma descrição das ações que esse texto solicita, obtendo uma lista para revisão. Essa lista permite conferir tanto as atividades quanto a sequência prevista. A comparação com o objetivo do usuário pode indicar a necessidade de alterar o prompt e repetir a análise, seguindo o procedimento de revisão mostrado pelo apresentador.

Q: Como as perguntas ao usuário ajudam no refinamento do prompt interativo do exemplo?

As perguntas fazem parte do processo de coleta de informações para aprimorar o prompt. No exemplo analisado, o assistente começa perguntando sobre o conteúdo e o propósito desejados pelo usuário. Depois da resposta, apresenta um prompt revisado, sugestões e perguntas relevantes para obter mais detalhes. As respostas adicionais alimentam novas atualizações da seção de prompt revisado. Esse processo deve continuar de maneira interativa até que o texto esteja completo e atenda às necessidades do usuário. Durante a depuração, essas etapas são descritas para que o usuário possa verificar se correspondem ao funcionamento que pretendia solicitar.

Summary & Key Takeaways

  • A técnica consiste em delimitar o prompt com as tags <prompt> e </prompt>, pedir uma descrição das ações que um assistente deveria executar e determinar explicitamente que nenhuma ação seja realizada.

  • O exemplo analisa um criador interativo de prompts: perguntar sobre conteúdo e propósito, apresentar um prompt revisado, sugestões e perguntas, e continuar refinando o texto com as respostas do usuário.

  • A lista de ações permite comparar a interpretação apresentada com o comportamento desejado. Quando uma tarefa ou sua sequência estiver incorreta, o usuário pode editar o prompt e repetir a depuração.


Read in Other Languages (beta)

Share This Summary 📚

Explore More Summaries from Sandeco 📚