Aller au contenu

Les agents IA basés sur LLM échouent à planifier selon la sémantique formelle

Enregistrer

En bref

  1. Les agents LLM atteignent 78% de succès hors ligne mais seulement 40% en conditions réelles.
  2. Les tâches non solvables sont reconnues dans moins de 10% des cas.
  3. Les stratégies de prompting complexes consomment 5 à 22 fois plus de tokens sans bénéfice clair.

Une étude teste les capacités de planification des agents IA basés sur LLM en les confrontant à des modèles formels (PDDL). Les résultats montrent des performances limitées, notamment en conditions réelles, et une surconsommation de tokens pour des gains marginaux.

Ce résumé vous donne l'essentiel. L'article complet, ses chiffres et ses citations sont chez cs.AI updates on arXiv.org.

Lire l'article original

Résumé généré par IA à partir de la source, relu par règles. Comment nous rédigeons · Signaler une erreur

Cookies et vie privée

Le Petit Récap n'utilise que le stockage strictement nécessaire (langue, thème, ce choix). Avec votre accord, nous mesurons aussi l'audience de façon anonyme, sans cookie, pour améliorer le site. En savoir plus