Aller au contenu

Apprentissage agentique en contexte : quels algorithmes les transformateurs peuvent-ils apprendre ?

Enregistrer

En bref

  1. Les transformateurs peuvent apprendre des algorithmes récursifs via des interactions en boucle fermée.
  2. L'alignement des récompenses de processus avec les préférences optimales améliore les décisions.
  3. Les politiques apprises persistent même après un fine-tuning sur des données textuelles variées.

Cette étude explore l'apprentissage en contexte agentique (Agentic ICL), où des transformateurs interagissent avec leur environnement pour ajuster dynamiquement leurs actions. Les chercheurs montrent que des modèles peuvent apprendre des algorithmes récursifs via des récompenses de processus ou de résultats, sans cibles d'états ou d'actions externes.

Ce résumé vous donne l'essentiel. L'article complet, ses chiffres et ses citations sont chez cs.AI updates on arXiv.org.

Lire l'article original

Résumé généré par IA à partir de la source, relu par règles. Comment nous rédigeons · Signaler une erreur

Cookies et vie privée

Le Petit Récap n'utilise que le stockage strictement nécessaire (langue, thème, ce choix). Avec votre accord, nous mesurons aussi l'audience de façon anonyme, sans cookie, pour améliorer le site. En savoir plus