Les LLMs peuvent-ils prédire les résultats d'expériences en ML ?
En bref
- Les LLMs prédisent mieux que le hasard les résultats d'expériences en ML, mais restent peu précis.
- Claude Opus 5.5 explique 49% de la variance des résultats, loin d'une prédiction parfaite.
- Les modèles sous-estiment systématiquement l'ampleur des changements expérimentaux.
Une étude évalue la capacité des grands modèles de langage à anticiper l'impact d'idées d'expériences en apprentissage automatique. Les résultats montrent une prédiction meilleure que le hasard, mais limitée, avec des écarts persistants sur certains benchmarks.
Ce résumé vous donne l'essentiel. L'article complet, ses chiffres et ses citations sont chez cs.AI updates on arXiv.org.
Lire l'article originalRésumé généré par IA à partir de la source, relu par règles. Signaler une erreur