Better Call GPT: Comparando grandes modelos de linguagem com advogados [pdf]
Grandes modelos de linguagem estão sendo cada vez mais testados contra advogados humanos em tarefas como revisão de contratos, com alguns estudos e startups alegando precisão comparável por uma fração do custo. Os comentaristas veem grande potencial para acesso mais barato a informações jurídicas e análise rotineira de documentos, mas destacam preocupações sérias sobre alucinações, falta de responsabilidade, barreiras regulatórias e a incapacidade dos modelos atuais de lidar com trabalho de alto risco e intensivo em fatos, como defesa criminal ou direito de família complexo. Muitos esperam que os LLMs se tornem ferramentas poderosas que aumentem, em vez de substituir, os advogados — especialmente para documentos padronizados e pesquisa preliminar — ao mesmo tempo em que alertam que estruturas profissionais de tipo corporativo e restrições legais podem desacelerar uma disrupção mais profunda.
Promessa da IA para Ajuda Jurídica Acessível
- Muitos veem os LLMs como um próximo “advogado para as massas”: revisando documentos pessoais (impostos, médicos, seguros, casamento), explicando opções e oferecendo orientação de baixo risco sem cobrança de $500/hora.
- As pessoas já usam LLMs para pesquisa inicial sobre licenças, contratos e questões jurídicas de software, para aprender terminologia e formular perguntas antes de contratar um profissional.
- Entusiasmo semelhante aparece para conselhos médicos e financeiros, e para resumos de contratos de consumo (aluguéis, ToS, seguros).
Confiabilidade, Responsabilidade e Regulação
- A preocupação central: os LLMs podem estar erradamente confiantes, sem responsabilidade por má prática profissional nem supervisão da ordem.
- Advogados têm licenciamento, regras éticas, seguro de má prática e risco reputacional; LLMs e fornecedores atualmente não têm.
- Ideias levantadas: obrigar “legal GPTs” ou seus operadores a manter seguro semelhante ao de má prática; novo seguro de “aconselhamento por IA”; mas a aplicação e a recuperabilidade são अस्प?
- Regras contra o exercício não autorizado da advocacia e legislaturas dominadas por advogados são vistas como barreiras prováveis a serviços jurídicos totalmente automatizados.
Capacidades: Onde os LLMs Ajudam vs. Falham
- Uso atual mais forte: revisão de contratos/documentos, extração de cláusulas, sumarização e checagens do tipo “isso é padrão?”, especialmente para acordos de alto volume e baixo risco.
- Vários profissionais relatam que os LLMs são melhores analisando do que gerando contratos; modelos padronizados com edição leve por IA são preferidos em vez de documentos totalmente redigidos por IA.
- Fraquezas: trabalho complexo e específico dos fatos (defesa criminal, direito de família, negócios sob medida), contingências sutis (por exemplo, beneficiários de trust) e estratégia de negociação.
- LLMs carecem de intencionalidade e não conseguem fornecer avaliações nuançadas de risco como “é defensável, mas cinzento”, algo central na prática real.
Impacto sobre Advogados, Acesso e Poder
- Alguns esperam grandes ganhos de eficiência e menos funções juniores; outros acham que proteções de tipo corporativo preservarão o trabalho e os preços no segmento premium.
- Há uma tensão entre empatia por profissionais deslocados e a enorme necessidade não atendida de aconselhamento acessível.
- Preocupação: governos podem usar LLMs para substituir advogados de defesa humanos para os pobres, enfraquecendo as proteções da Sexta Emenda.
Considerações Técnicas e de Produto
- RAG, anonimização, escopos restritos e validação com humano no circuito são vistos como padrões pragmáticos.
- Usuários observam “nerfing” de segurança e limites de contexto; outros notam que modelos mais novos têm melhor desempenho em benchmarks, mas não resolvem a veracidade.
- Várias startups já vendem revisão assistida por IA e Q&A, mas monetização e confiança continuam desafiadoras.
Críticas ao Artigo
- O estudo, segundo relatos, usou apenas 10 contratos de procurement e um único playbook de revisão; comentadores acham isso restrito demais para afirmações “em nível de indústria”.
- Alguns o veem mais como marketing do que benchmarking rigoroso, especialmente dadas as ligações comerciais.