IA na pesquisa jurídica acelera o rascunho, mas não substitui a conferência da fonte: segundo pesquisadores de Stanford, modelos de linguagem erraram entre 69% e 88% das respostas a consultas jurídicas específicas. O uso seguro é tratar qualquer precedente, trecho ou tese devolvida por um chatbot como hipótese de trabalho, nunca como citação pronta. Este guia mostra onde a IA ajuda de fato, o que ela inventa com mais frequência e as três checagens que impedem uma citação falsa de chegar às mãos do juiz.
O que os dados mostram
Em janeiro de 2024, o Stanford RegLab e o Institute for Human-Centered AI divulgaram uma avaliação sistemática com mais de 200 mil perguntas submetidas a cada um dos modelos GPT 3.5, Llama 2 e PaLM 2, cobrindo de autoria de decisões até conflitos entre precedentes. A conclusão central é desconfortável: ao responder perguntas sobre a tese central de uma decisão judicial, os modelos alucinaram em pelo menos 75% das vezes, e na tarefa de relacionar dois precedentes o desempenho ficou próximo do chute.
O estudo identificou padrões que servem de bússola para quem pesquisa: os erros se concentram em decisões de instâncias inferiores e em casos pouco citados, enquanto casos famosos rendem respostas melhores. Os modelos também tendem ao excesso de confiança e aceitam sem hesitar premissas falsas embutidas na pergunta. Traduzindo para a rotina de um escritório: quanto mais local, recente e pouco citada a decisão, maior a chance de o chatbot preencher a lacuna com material inventado. A íntegra da análise está disponível no estudo publicado pelo Stanford HAI.
O caso que virou exemplo
O alerta não é teórico. Em 2023, no caso Mata v. Avianca, julgado em Nova York, um escritório protocolou petição contrária a um pedido de arquivamento citando decisões que ninguém conseguia localizar. Pressionado pelo tribunal a apresentar as decisões, o quadro ficou claro: o advogado responsável havia usado o ChatGPT, e a ferramenta fabricou as decisões judiciais citadas na petição. O juiz aplicou sanções aos advogados e, por responsabilidade solidária, ao próprio escritório, afirmando que as regras processuais impõem ao advogado um papel de guardião da veracidade do que protocola. A lição atravessa fronteiras: no Brasil, a responsabilidade pela peça assinada também é do advogado, não da ferramenta. A decisão de sanções está publicada na íntegra pelo tribunal.
Protocolo de checagem em 3 passos
Antes de qualquer citação sugerida por IA entrar na sua peça, execute esta sequência na ordem:
- Confirme a existência da decisão. Localize a citação completa, com tribunal, número do processo e data, em fonte oficial: site do tribunal, Diário da Justiça ou base contratada. Se a decisão não aparece em nenhuma base pública ou paga, ela não existe para fins de citação, por mais detalhada que pareça a referência.
- Confira o trecho literal. Abra a decisão na íntegra e leia o parágrafo inteiro de onde a suposta citação foi extraída. Compare palavra por palavra com o que a IA devolveu e confira a numeração de página ou de parágrafo, porque o modelo pode citar um julgado real com um trecho distorcido.
- Valide a vigência. Verifique se houve recurso, revisão ou mudança de entendimento posterior ao julgado. Um precedente real, mas superado, prejudica a tese quase tanto quanto um falso.
Nenhum desses passos exige abandonar a IA. Ela continua útil para montar o roteiro inicial da pesquisa, sugerir termos de busca e organizar o que você já validou. Um hábito que economiza tempo: peça à IA um registro de pesquisa com a referência completa de cada decisão mencionada e o link da fonte. A lacuna nesse registro é o sinal mais claro de material fabricado.
Tabela de riscos por tarefa
O risco muda conforme a tarefa delegada. Use esta matriz de decisão para calibrar a verificação:
| Tarefa delegada à IA | Risco de erro | Verificação mínima |
|---|---|---|
| Resumir documento que você possui | Baixo | Conferir trechos-chave contra o original |
| Sugerir teses e termos de busca | Médio | Pesquisa própria em base oficial |
| Citar precedentes e jurisprudência | Alto | Localizar cada decisão na fonte oficial |
| Redigir trecho de petição | Médio | Revisão jurídica completa antes de assinar |
Como usar sem assumir risco
Ferramentas jurídicas que conectam o modelo a bases oficiais de decisões reduzem o espaço para a citação inventada, mas o dever final de conferir continua sendo de quem assina a peça. A fronteira entre ajuda e invenção também aparece em outras profissões que vivem de texto: no trabalho de tradutores e revisores, a IA serve para rascunho e nunca como autoridade final. Quando o objetivo é atendimento, e não pesquisa, o caminho muda: a implementação de assistente virtual por telefone segue regras próprias de fluxo e de passagem para um humano.
Na prática, o ganho real da IA na pesquisa jurídica não está em substituir a leitura das decisões, e sim em encurtar o caminho até elas: gerar hipóteses, montar o roteiro de busca e organizar o material que você mesmo validou. Quem adota essa divisão de trabalho colhe a velocidade sem expor o cliente e a própria carteira profissional ao risco de uma citação que nunca existiu.