Índice do artigofaltam 6 min de leitura
Não é notícia que a inteligência artificial inventa. A notícia é que as ferramentas jurídicas construídas especificamente para impedir isso ainda inventam entre 17% e 33% das vezes.
Todo mundo já ouviu que IA alucina. O problema é que essa frase virou tão comum que parou de gerar decisão: ela soa como um defeito genérico, do tipo que a próxima versão resolve, e o assunto morre aí.
Este artigo é sobre a parte que não morreu. Existe hoje um registro público de 1.962 decisões judiciais envolvendo citações fabricadas por IA, e existe medição acadêmica de quanto as ferramentas jurídicas comerciais ainda erram depois de todo o esforço para impedir isso. Com esses dois números na mão, a pergunta muda de "a IA inventa?" para uma bem mais útil: o que, no seu processo, pega a invenção antes de ela sair da empresa?
Resumo do artigo
- Uma base pública registrava 1.962 decisões judiciais com citações fabricadas por IA em 26 de agosto de 2026, em mais de 50 jurisdições, e ela conta apenas os casos em que o tribunal percebeu.
- Buscar no acervo antes de responder reduz e não zera: 17% e 33% de alucinação em duas ferramentas jurídicas líderes, contra 43% de um modelo genérico.
- A ferramenta que menos inventou foi a que mais deixou de responder. Os dois erros são reais e você escolhe qual prefere.
- O controle que funciona não é revisão humana no fim: é resolver cada citação contra a base oficial antes de o texto chegar a qualquer pessoa.
O que já está registrado nos tribunais
O caso que virou símbolo é de junho de 2023, nos Estados Unidos. Num processo contra a companhia aérea Avianca, uma petição apresentou seis decisões que simplesmente não existiam. O tribunal aplicou US$ 5.000 de multa, e a história correu o mundo como anedota.
Deixou de ser anedota. O pesquisador Damien Charlotin mantém uma base pública que cataloga decisões judiciais envolvendo material fabricado por IA, atualizada diariamente.
Fonte: base "AI Hallucination Cases", de Damien Charlotin, na leitura de 26 de agosto de 2026 apresentada em St. Gallen. A base segue crescendo.
Dois detalhes desse número importam mais que o número. O primeiro é que ele conta apenas os casos em que o tribunal constatou ou indicou o uso de material inventado. Todo caso em que ninguém percebeu está fora, o que faz do 1.962 um piso, não um total.
O segundo é que a base é mantida por uma pessoa, o que diz menos sobre a dedicação dela e mais sobre o quão fácil ficou encontrar esses casos.
O que isso destrava para quem decide: o risco saiu do campo hipotético e entrou no campo documentado. Isso muda a conversa com jurídico, compliance e seguro, porque agora existe precedente do que acontece quando a conferência falha.
Buscar no acervo reduz a invenção, e não zera
A resposta técnica do mercado ao problema foi trazer o documento antes de responder: o sistema busca no acervo jurídico, entrega os trechos ao modelo e pede que ele responda apenas com base neles. É a arquitetura que sustenta os produtos jurídicos das duas maiores editoras do mundo.
Pesquisadores de Stanford mediram o resultado disso com 202 consultas pré-registradas, sobre as versões de produto de 2024, e publicaram no Journal of Empirical Legal Studies.
Fonte: Magesh et al., Journal of Empirical Legal Studies 22(2), 2025, sobre versões de produto de 2024.
A leitura correta é dupla e as duas partes contam. A busca no acervo funcionou: cortou o erro pela metade ou mais em relação a um modelo genérico. E a busca no acervo não resolveu: uma em cada três respostas de uma das ferramentas ainda continha conteúdo alucinado, num produto vendido justamente com a promessa de eliminar o problema.
Vale dizer que essas são versões de 2024 e os produtos evoluíram desde então. O que não envelhece é a lição de método: fornecedor que promete zero não está descrevendo o comportamento do sistema, está descrevendo a intenção dele.
A ferramenta que menos inventou foi a que mais deixou de responder
Escondido no mesmo estudo existe um resultado que quase nunca aparece nas manchetes, e que é o mais útil para desenhar um processo. Além de medir alucinação, os pesquisadores mediram respostas incompletas, ou seja, casos em que a ferramenta não entregou o que foi pedido.
O produto que teve uma das menores taxas de invenção teve, de longe, a maior taxa de resposta incompleta: cerca de dois terços das consultas. E o modelo genérico, que mais inventou, foi o que menos deixou de responder.
Isso não é coincidência, é o mesmo botão. Um sistema fica mais cauteloso e inventa menos, mas passa a devolver "não encontrei" com mais frequência. Fica mais assertivo, responde sempre, e a conta chega em citação inventada.
Para quem está escolhendo ferramenta, isso significa que não existe a opção sem erro, existe a escolha de qual erro você prefere absorver. Em pesquisa jurídica, quase sempre a resposta certa é preferir o silêncio: um "não encontrei" custa uma busca manual, e uma citação inventada custa credibilidade em juízo.
O problema é que quase nenhum sistema é configurado para preferir o silêncio, e existe uma razão medida para isso.
O modelo chuta justamente onde chutar custa mais caro
Em agosto de 2026, uma avaliação com 17 modelos abertos usou uma pontuação que muda tudo: +1 por acerto, 0 por abstenção, -1 por erro. É a mesma lógica de uma prova com desconto por chute, e é a lógica correta para trabalho jurídico, onde uma resposta errada custa mais do que resposta nenhuma.
Na configuração mais difícil, com dezesseis alternativas, apenas 1 dos 17 modelos ficou acima de zero. Todos os outros perderam mais pontos chutando do que ganharam acertando.
O que isso destrava: "não sei" é uma funcionalidade, e ela tem que ser especificada como qualquer outra. Tratamos a mecânica dessa decisão, aplicada a assistentes internos, em Por que o assistente de IA da sua empresa responde errado.
O controle que pega a invenção antes de ela sair
Revisão humana no fim não é controle, é esperança. Quem revisa lê um texto coerente, bem escrito e plausível, com citações no formato correto, e não tem nenhum sinal de que a terceira referência não existe. É exatamente esse o modo de falha dos casos catalogados.
O controle que funciona é mecânico e acontece antes de qualquer pessoa ler:
O passo 3 é o que quase todo mundo pula, e é onde mora a falha mais traiçoeira: a citação existe, o processo é real, e a passagem atribuída a ele diz outra coisa.
Isso passa em qualquer verificação que só confira se o número do processo resolve, porque o número resolve mesmo. O que não existe é a frase.
O passo 4 muda o trabalho do revisor de forma decisiva. Procurar erro num texto que parece certo é uma tarefa que humanos fazem mal. Julgar cinco itens já marcados como suspeitos é uma tarefa que humanos fazem bem. É a mesma pessoa, com resultado diferente, porque o problema apresentado a ela mudou.
O que arquitetura resolve, e o que ela não resolve
Vale ser explícito, porque essa fronteira é onde projetos criam expectativa errada e contrato vira discussão.
Arquitetura resolve
- Reduzir a frequência do erro, com número medido antes e depois
- Tornar o erro visível em vez de silencioso
- Baratear a conferência, que deixa de ser leitura integral
- Deixar rastro de qual documento sustentou cada afirmação
Arquitetura não resolve
- Eliminar o erro, que continua possível em qualquer configuração
- Transferir a responsabilidade de quem assina a peça
- Substituir o julgamento sobre o que a fonte encontrada significa
- Compensar acervo incompleto: o que não está na base não é achado
A coluna da direita não é ressalva jurídica de rodapé, é critério de projeto. Um sistema desenhado como se a coluna da esquerda cobrisse tudo produz exatamente o caso que entra na base de Charlotin.
O que fazer antes de deixar a IA escrever algo que vai ser protocolado
- Toda citação resolve automaticamente contra a base oficial, sem exceção manual
- A passagem citada é conferida dentro do documento, não só o número do processo
- O que não resolveu chega marcado ao revisor, em vez de diluído no texto
- O sistema tem permissão explícita para devolver que não encontrou
- Está escrito quem assina, quem confere e o que acontece quando os dois discordam
O quarto item costuma ser o mais difícil de aprovar, porque um assistente que às vezes diz "não encontrei" parece pior numa demonstração. Ele é melhor em produção, e a diferença entre os dois momentos é justamente o que este artigo tenta antecipar.
Fontes e método
A base deste artigo é a palestra "Fifty Years of Legal AI", de Dr. Joel Niklaus, apresentada na AI & Legal Reasoning Conference da Universidade de St. Gallen em 28 de agosto de 2026, e as fontes primárias que ela credita: a base "AI Hallucination Cases", de Damien Charlotin; o estudo de Magesh et al. publicado no Journal of Empirical Legal Studies 22(2), 2025, com 202 consultas pré-registradas; a reportagem da Reuters de 26 de junho de 2023 sobre o caso Mata contra Avianca; e a avaliação de modelos abertos em tarefas jurídicas suíças publicada por Niklaus em agosto de 2026.
O número de casos e as taxas de alucinação foram conferidos em fontes independentes na apuração de 1º de setembro de 2026. LexisNexis, Thomson Reuters, OpenAI e Hugging Face são empresas externas à X-Apps, citadas como objeto de análise e sem relação comercial conosco. Este conteúdo é técnico e informativo, e não constitui aconselhamento jurídico.
Precisa de conferência automática de citação?
Solicite um orçamento e desenhe o controle antes do piloto, não depois do incidente.
Perguntas frequentes
Reduz, não elimina. Num estudo de Stanford com 202 consultas pré-registradas sobre versões de 2024, o Lexis+ AI alucinou em cerca de 17% das respostas e o Westlaw AI-Assisted Research em cerca de 33%, contra 43% de um modelo genérico.
Uma base pública mantida pelo pesquisador Damien Charlotin registrava 1.962 decisões em 26 de agosto de 2026, em mais de 50 jurisdições. Ela conta apenas os casos em que o tribunal constatou o uso de material inventado, então o número real é maior.
Porque quase nada no treino o penaliza por chutar. Numa medição de agosto de 2026 com pontuação que descontava erro, apenas 1 de 17 modelos abertos ficou acima de zero na configuração mais difícil. Os demais chutaram justamente onde chutar custava caro.
Resolver a citação contra a base oficial de forma automática, antes de o texto chegar ao revisor. Toda referência precisa devolver um documento real, e a passagem citada precisa existir naquele documento. Sem isso, a conferência depende de alguém desconfiar.
De quem assina a peça. Arquitetura reduz, mede e barateia o problema, e não transfere responsabilidade. Nenhum desenho técnico muda quem responde perante o juízo.
Dá, desde que a citação passe por verificação automática e a ferramenta possa devolver que não encontrou. As duas coisas precisam existir no processo, não na promessa comercial do fornecedor.
