Como conferir se o que a IA disse está certo?
Confira fora da conversa. A IA escreve com a mesma segurança quando acerta e quando erra, então "conferi e está tudo certo" é narração, não prova. Peça o trecho exato do documento com a página, a fórmula de cada conta e a fonte oficial de leis e prazos. E ajuste o rigor ao tamanho do estrago se o erro passar.
Narração não é prova
A IA é excelente em escrever com confiança. É o que ela faz de melhor: prever a próxima palavra mais provável, uma depois da outra. E a palavra mais provável depois de "conferi os valores" é "está tudo certo". Se ela disse que verificou, ela disse. Quem verifica é você, ou um processo que você montou para isso.
Isso já custou caro. Em fevereiro de 2025, o TJSC multou o autor de um recurso que citava jurisprudência inexistente gerada por IA: 10% do valor da causa, e o caso foi enviado à OAB. Quatro lugares concentram os erros que custam caro: números e contas; leis, normas e prazos; nomes, datas e citações; e preços e condições de hoje. Se a resposta tem qualquer um deles, precisa de conferência fora da conversa.
Cinco jeitos de transformar narração em prova
| Peça | Por quê |
|---|---|
| A fonte e o link | Sem fonte verificável, trate como hipótese. Abra o link: às vezes ele nem existe. |
| A fórmula | Não aceite só o resultado. Peça a fórmula da planilha e refaça a conta. |
| A fonte oficial | Lei, imposto, edital, prazo: compare com o site do órgão, não com a resposta. |
| O teste | Se a IA diz que algo funciona, peça um caso em que daria errado e veja se ela acerta. |
| A assinatura | Quem publica, envia ou assina é a pessoa. A ferramenta não responde por nada. |
O trecho antes da conclusão
Quando a resposta vem de um documento, a melhor proteção é pedir a citação literal. Duas coisas acontecem. Você confere em segundos, porque basta procurar a frase no PDF. E a IA erra menos, porque precisa se apoiar em algo que está de fato ali. Se o trecho não aparece no documento, aquela afirmação caiu. Use em medium:
Comando para a sua IA
Responda só com base no documento anexo. Para cada afirmação, copie o trecho exato e informe a página. Se o documento não trouxer a resposta, escreva "não consta" em vez de deduzir.
Quanto conferir depende do risco
Conferir tudo do mesmo jeito é tão ruim quanto não conferir, porque ninguém sustenta esse ritmo e a conferência vira teatro. O esforço deve seguir o tamanho do estrago:
| Risco | Exemplo | Como conferir |
|---|---|---|
| Baixo | Post, ideia, rascunho interno | Uma leitura. Olhe só nomes, preços e datas. |
| Médio | E-mail a cliente, resumo de reunião | Compare com a fonte nos pontos principais. |
| Alto | Proposta, contrato, relatório, edital | Cada número e citação até a origem, mais uma segunda pessoa. |
| Crítico | Tributo, saúde, jurídico, dinheiro de terceiros | Quem é da área revisa e assina. A IA só prepara. |
Na IGNIX, num relatório de prestação de contas, nenhum número entra porque a IA disse. Cada número do texto aponta para a linha da planilha ou o documento de onde veio. Se a IA não consegue dizer de onde tirou, o número não entra. E, sempre que possível, a conta sai de uma planilha com fórmulas ou de um pequeno programa, e não do texto da resposta. Número sem fórmula é opinião com casas decimais.
Peça o que ela não verificou
No fim de toda resposta importante, peça a lista do que não foi verificado, com o lugar onde você confere cada item. Guarde também o que foi conferido, quando e por quem: uma coluna na planilha de fontes resolve, e depois de alguns meses vira a sua própria tabela de onde a IA mais erra.
Quando eu peço para a IA conferir, eu peço também a lista do que ela NÃO conseguiu verificar. Essa lista é a que eu leio primeiro.
No glossário Alucinação Trecho-fonte
Perguntas frequentes
Por que a IA inventa informação?
Porque ela prevê a próxima palavra mais provável, uma depois da outra. Quando falta o dado, completa o texto com algo que parece certo: uma lei, um número, uma citação. Isso se chama alucinação. Ela não mente de propósito; ela completa o texto.
Pedir para outra IA revisar resolve?
Ajuda a achar onde olhar, porque ela não tem apego ao texto e modelos de empresas diferentes tendem a errar em lugares diferentes. Mas não substitui a fonte: as duas podem repetir o mesmo erro, sobretudo em leis, datas e dados recentes. Peça uma crítica, como "encontre os cinco pontos mais fracos", e decida pela fonte original.
Como conferir quando a IA classificou mil itens?
Por amostra. Sorteie uns cinquenta casos, confira na mão e conte os erros. Se forem poucos e sem importância, siga, e repita a amostra de tempos em tempos, porque a qualidade pode mudar quando o assunto ou o modelo muda. Se os erros se concentram num tipo de caso, separe esse tipo para uma pessoa olhar.