Calcul de confiance factuelle des LLM par contrastes de vraisemblance
En bref
- Nouvelle méthode CFE/CFP pour estimer la confiance factuelle des LLM via des contrastes de vraisemblance.
- Amélioration significative de la calibration des scores de confiance par rapport aux approches existantes.
- Discrimination faible dans les langues peu dotées, limitant l'utilité des résultats.
Cette étude propose une méthode pour estimer la confiance des modèles de langage dans les affirmations factuelles, en utilisant des contrastes de vraisemblance entre conditions factuelles et non factuelles. Les résultats montrent une meilleure calibration des scores de confiance, bien que la discrimination reste faible dans les langues peu dotées.
Ce résumé vous donne l'essentiel. L'article complet, ses chiffres et ses citations sont chez cs.AI updates on arXiv.org.
Lire l'article originalRésumé généré par IA à partir de la source, relu par règles. Signaler une erreur