Des POMDPs avec des variables d'état visibles - Inria - Institut national de recherche en sciences et technologies du numérique
Communication Dans Un Congrès Année : 2010

Des POMDPs avec des variables d'état visibles

Mauricio Araya-López
  • Fonction : Auteur
  • PersonId : 881106
Vincent Thomas
Olivier Buffet

Résumé

Les difficultés rencontrées dans les problèmes de décision séquentielle dans l'incertain sont souvent liées à la grande taille de l'espace d'états à considérer. Exploiter la structure du problème, par exemple en employant une représentation factorisée, est une approche souvent efficace mais, dans le cas des problèmes de décision markoviens partiellement observables, elle néglige un aspect important : le fait que certaines variables d'état peuvent être visibles. Dans le présent article nous proposons d'exploiter le fait que l'espace d'état peut-être factorisé en une partie visible et une partie cachée. En prenant l'exemple d'Incremental Pruning, nous montrons comment adapter des algorithmes classiques à cette factorisation et quels sont les bénéfices obtenus, entre autres sur la base de résultats expérimentaux.

Mots clés

Fichier principal
Vignette du fichier
araya10jfpda-momdp.pdf (361.85 Ko) Télécharger le fichier
Origine Fichiers produits par l'(les) auteur(s)

Dates et versions

hal-00643458 , version 1 (21-11-2011)

Identifiants

  • HAL Id : hal-00643458 , version 1

Citer

Mauricio Araya-López, Vincent Thomas, Olivier Buffet, François Charpillet. Des POMDPs avec des variables d'état visibles. 5èmes Journées Francophones de Planification, Décision et Apprentissage pour la conduite de systèmes, Jun 2010, Besancon, France. ⟨hal-00643458⟩
325 Consultations
107 Téléchargements

Partager

More