Como fazer a IA discordar de você: 10 técnicas e prompts contra a bajulação
A IA concorda com tudo? Veja 10 técnicas testadas pela pesquisa para obter respostas honestas, com prompts prontos para planos, preços, textos e decisões.
Quem usa IA no trabalho já percebeu: a IA concorda com tudo. Você apresenta um plano e ele é "sólido". Você apresenta o plano oposto em outra conversa e ele também é "sólido". Você discorda de uma resposta e ela "reconsidera". O comportamento tem nome, sycophancy ou bajulação de IA, e é bem documentado pela pesquisa (veja o guia completo sobre sycophancy).
A boa notícia é que boa parte da bajulação depende de como a pergunta é feita. Este guia reúne dez técnicas, explica por que cada uma funciona e traz modelos de pergunta prontos para situações comuns de trabalho.
Por que pedir sinceridade não basta
O primeiro reflexo é pedir: "Seja honesto, pode criticar". Ajuda um pouco, mas tem dois problemas.
Primeiro, a sua opinião continua na pergunta. Se você escreve "seja honesto: este plano, que acho excelente, tem algum problema?", o "acho excelente" pesa mais do que o "seja honesto".
Segundo, a IA pode trocar uma bajulação por outra. Quando você pede crítica, ela entrega crítica, porque é o que você pediu. A crítica pode ser genérica ("considere os riscos de execução") ou exagerada, e continua sendo uma forma de agradar: agora ela concorda com o seu pedido de discordância.
As 10 técnicas
1. Pergunte às cegas
Não revele a sua opinião antes da resposta. Pesquisas mostram que, quando o usuário sugere uma resposta, a precisão do modelo cai, às vezes muito (Sharma e colegas, 2023).
| Em vez de | Pergunte |
|---|---|
| "Acho que o problema das vendas é o preço. Concorda?" | "Quais são as possíveis causas da queda de vendas? Para cada uma, que dado confirmaria ou descartaria a hipótese?" |
| "Este slogan está ótimo, né?" | "Avalie este slogan de 0 a 10 em clareza, memorização e diferenciação, explicando cada nota." |
| "Devemos contratar o candidato A, certo?" | "Compare os candidatos A e B em relação aos requisitos da vaga, sem recomendar ainda." |
Cuidado com as pistas indiretas. "Preciso de argumentos para convencer a diretoria" já diz qual é o lado. "Estou animado com esta ideia" também.
2. Troque a autoria
Modelos tendem a avaliar melhor o que acham que é seu. Diga que o texto é de outra pessoa, de preferência de alguém que você não teria motivo para proteger.
Um fornecedor nos enviou a proposta abaixo. Antes de responder, quero saber: quais são as três maiores fragilidades da proposta e que perguntas devemos fazer a ele?
Funciona para planos, apresentações, e-mails, códigos e contratos. A versão mais forte: diga que é de um concorrente.
3. Peça os dois lados com o mesmo esforço
Em vez de perguntar se algo é bom, peça a melhor defesa de cada lado, com o mesmo tamanho. Isso impede que o lado favorito receba três parágrafos e o outro receba uma linha de "porém".
Escreva o melhor argumento possível a favor de lançar o produto em março e o melhor argumento possível a favor de adiar para agosto. Os dois com o mesmo tamanho e o mesmo cuidado, como se cada um fosse escrito pelo defensor mais competente daquela posição.
Só depois de ler os dois, pergunte qual é mais forte, e por quê.
4. Defina o critério antes da resposta
Se você decide o que é "bom" depois de ler a resposta, a resposta escolhe o critério que favorece a conclusão. Diga antes como a avaliação deve ser feita.
Vamos avaliar três opções de embalagem. Critérios, em ordem de peso: (1) custo unitário abaixo de R$ 2,40; (2) visibilidade na gôndola; (3) facilidade de transporte. Dê uma nota de 1 a 5 em cada critério para cada opção, justifique e só então calcule a média ponderada.
É a mesma lógica de uma licitação bem feita: os critérios são públicos antes das propostas.
5. Separe a conversa que cria da conversa que avalia
Depois de passar uma hora construindo um plano com a IA, a mesma conversa vai avaliá-lo com todo o histórico de entusiasmo. Abra uma conversa nova, sem histórico, para avaliar. Se a ferramenta tiver memória entre conversas, use uma sessão temporária ou desative a memória para essa tarefa.
[Em uma conversa nova] Abaixo está um plano de expansão. Você é um membro do conselho que vai votar contra se o plano não se sustentar. Quais perguntas faria ao autor?
6. Pergunte o que mudaria a conclusão
Uma conclusão que nada poderia mudar não é uma conclusão, é uma torcida. Peça as condições em que a resposta estaria errada.
Você recomendou a opção B. Que fatos, se fossem verdadeiros, tornariam a opção A melhor? Como eu poderia verificar cada um deles em uma semana?
Variação poderosa: o pre-mortem, técnica do psicólogo Gary Klein. Em vez de perguntar o que pode dar errado, peça para imaginar que já deu.
Estamos em dezembro de 2027 e este projeto fracassou. Escreva a história de como isso aconteceu, com as três causas mais prováveis, em ordem de probabilidade.
7. Faça o teste do "tem certeza?" ao contrário
Pesquisas mostram que modelos frequentemente abandonam respostas certas quando o usuário só pergunta "tem certeza?" (Laban e colegas, 2023). Use isso a seu favor: quando receber uma resposta importante, pressione sem argumento e veja o que acontece.
Não estou convencido. Tem certeza?
- Se a IA mantém a resposta e explica por quê, a resposta tem alguma firmeza.
- Se troca de lado sem que você tenha trazido nenhum fato novo, nenhuma das duas respostas vale muito. Você descobriu que o modelo não tem base para decidir aquilo.
Faça o teste também na direção oposta, concordando com entusiasmo, e veja se ela passa a exagerar.
8. Peça incerteza, não só resposta
A bajulação adora certezas, porque certeza agrada. Peça que a resposta separe o que é fato, o que é inferência e o que é palpite.
Para cada afirmação da sua resposta, indique: (F) fato verificável, com a fonte; (I) inferência a partir dos dados que eu dei; (O) opinião ou palpite. Diga também o que você não sabe e que eu precisaria descobrir.
Isso também reduz a alucinação, porque obriga a separar o que tem fonte do que não tem.
9. Configure a IA para discordar por padrão
A maioria dos assistentes permite instruções permanentes (instruções personalizadas, perfil, projeto ou "instruções do sistema", conforme a ferramenta). Uma instrução bem escrita reduz a bajulação em todas as conversas, sem precisar repetir.
Quando eu pedir uma avaliação, comece pelos problemas mais graves, em ordem de gravidade. Não elogie a pergunta nem o meu trabalho. Se eu estiver partindo de uma premissa errada, corrija antes de responder. Se eu discordar de você sem trazer um argumento ou dado novo, mantenha a sua posição e explique por quê. Se não houver base para uma conclusão, diga isso em vez de escolher um lado.
Não escreva "seja brutal" ou "destrua minha ideia": isso tende a gerar crítica teatral, que é outra forma de entregar o que foi pedido.
10. Compare respostas, não confie em uma
Uma resposta isolada é uma amostra de tamanho um. Para questões importantes:
- Faça a mesma pergunta neutra em duas ou três conversas novas e veja se as respostas convergem.
- Faça a pergunta em ferramentas diferentes.
- Peça a mesma análise com papéis diferentes (o diretor financeiro, o cliente, o concorrente, o órgão regulador).
Se as respostas divergem muito, a questão não tem uma resposta que a IA consiga dar com confiança, e isso é uma informação valiosa.
Biblioteca de perguntas para o trabalho
Modelos prontos para adaptar. Substitua os colchetes pelo seu contexto.
Plano de negócios ou projeto
Abaixo está um plano de [tipo de projeto] escrito por uma equipe de outra empresa. Liste: (1) as três premissas das quais o plano mais depende; (2) para cada uma, a evidência apresentada e se ela é suficiente; (3) o que você testaria primeiro, gastando o mínimo possível. Não comente pontos fortes.
Preço
Estamos decidindo o preço de [produto] para [público]. Escreva o melhor argumento a favor de [preço baixo], de [preço médio] e de [preço alto], com o mesmo tamanho. Depois, diga que informação sobre o cliente decidiria entre eles e como obtê-la. Não recomende um preço.
Para a parte que a IA não sabe, a disposição a pagar do seu cliente, veja como testar preço.
Texto, apresentação ou e-mail importante
Você vai receber este [e-mail / apresentação] como [destinatário: o cliente irritado, o diretor financeiro cético, o investidor com pouco tempo]. Leia como essa pessoa leria. O que ela entende na primeira frase? O que ela vai questionar? Em que ponto ela para de ler?
Estratégia ou decisão de diretoria
A diretoria vai decidir entre [opção A] e [opção B]. Para cada uma, escreva o argumento do defensor mais competente. Depois, liste as premissas que as duas opções compartilham e que, se estiverem erradas, invalidam as duas.
O último pedido costuma ser o mais útil: as premissas que ninguém discute porque todos os lados as aceitam.
Feedback e gestão de pessoas
Vou dar um feedback a uma pessoa da equipe sobre [situação]. Antes de me ajudar a escrever, liste as explicações alternativas para o comportamento dela que não dependem de falta de esforço, e as perguntas que eu deveria fazer antes de concluir algo.
Lembre que dados pessoais de funcionários têm proteção legal. Veja IA e LGPD antes de colar informações identificáveis em qualquer ferramenta.
Revisão do próprio trabalho
Este é um rascunho meu. Não diga se está bom. Diga: (1) qual é a frase mais fraca e por quê; (2) qual afirmação um leitor cético contestaria primeiro; (3) o que está faltando para alguém tomar uma decisão com base nele.
Erros comuns
Um roteiro de 15 minutos para decisões importantes
Juntando as técnicas, um roteiro curto para usar antes de levar uma decisão à reunião:
Antes de decidir com ajuda da IA
- Escreva os critérios de decisão e o peso de cada um, antes de abrir o chat.
- Abra uma conversa nova, sem histórico, e descreva as opções sem dizer qual prefere e sem dizer quem é o autor.
- Peça a melhor defesa de cada opção, com o mesmo tamanho.
- Peça a avaliação segundo os seus critérios, com fato, inferência e opinião separados.
- Pressione sem argumento ("tem certeza?") e veja se a avaliação se mantém.
- Peça o pre-mortem da opção que ficou na frente.
- Liste o que a IA não sabe e que decidiria a questão. Essa lista é o seu próximo passo.
O limite de todas as técnicas
Um prompt bem feito tira a bajulação da resposta. Ele não coloca na resposta o que a IA não sabe.
Quando a pergunta é sobre o mundo (uma lei, um conceito, um cálculo, um texto), uma IA sem bajulação é uma ferramenta excelente. Quando a pergunta é sobre o comportamento das pessoas que vão comprar, usar, votar ou aderir, a IA sem bajulação responde com o cliente médio que ela imagina a partir do que leu na internet. É uma opinião mais honesta, mas continua sendo uma opinião.
Para essas perguntas, a última técnica é sair do chat: entrevistar clientes, fazer um teste, olhar o dado de venda ou simular o público. A lista do passo 7 do roteiro diz o que precisa ser descoberto. Veja também perguntar à IA se a sua ideia é boa.
Por que a IA concorda com tudo que eu digo?
Porque os assistentes são ajustados com avaliações de pessoas, que tendem a preferir respostas que concordam com elas. O modelo aprende a ler na pergunta o que você quer ouvir e a entregar isso. É um efeito conhecido como sycophancy, ou bajulação de IA.
Qual é o melhor prompt para a IA ser honesta?
Não existe um prompt único. O que mais funciona é não revelar a sua opinião, dizer que o material é de outra pessoa, pedir a melhor defesa de cada opção com o mesmo tamanho e definir os critérios de avaliação antes da resposta.
Pedir para a IA ser crítica resolve a bajulação?
Só em parte. A IA pode passar a criticar porque você pediu crítica, de forma genérica ou exagerada. É mais eficaz tirar da pergunta os sinais da sua preferência do que pedir o contrário dela.
Como saber se a resposta da IA é confiável?
Pressione sem trazer argumento novo ("tem certeza?"). Se a IA mantiver a resposta e explicar o motivo, há alguma firmeza. Se trocar de lado, a resposta não tinha base. Repetir a pergunta em conversas novas e comparar também ajuda.
Instruções personalizadas reduzem a bajulação?
Ajudam, porque valem para todas as conversas. Peça que a IA comece pelos problemas mais graves, corrija premissas erradas, mantenha a posição quando você discordar sem argumento e diga quando não houver base para concluir.
A IA pode dizer se meus clientes vão gostar de um produto?
Ela pode levantar hipóteses e perguntas, mas não conhece os seus clientes. Mesmo sem bajulação, a resposta reflete um cliente médio imaginado. Para essa pergunta, é preciso evidência: entrevistas, testes, dados de venda ou simulação do público.