LexPilot : Benchmark sur l'interaction proactive des LLMs juridiques en Chine
En bref
- LexPilot évalue l'interaction proactive des LLMs avec des non-juristes en droit civil chinois.
- Les LLMs actuels sous-performent de 23,84 % dans les prédictions de verdicts avec des consultations incomplètes.
- Le benchmark utilise 432 jugements réels et 36 causes d'action courantes pour les tests.
Un nouveau benchmark, LexPilot, évalue la capacité des grands modèles de langage à interagir de manière proactive avec des non-juristes lors de consultations en droit civil chinois. Les résultats montrent que les LLMs actuels peinent à identifier les points litigieux et à obtenir les informations manquantes, réduisant la précision des prédictions de verdicts de 23,84 % en moyenne.
Ce que ça change pour vous
- JuridiqueLes cabinets juridiques doivent tester les LLMs sur LexPilot avant déploiement pour éviter des conseils incomplets ou erronés.
Ce résumé vous donne l'essentiel. L'article complet, ses chiffres et ses citations sont chez cs.AI updates on arXiv.org.
Lire l'article originalRésumé généré par IA à partir de la source, relu par règles. Signaler une erreur