Complexité exponentielle de l'évaluation hors politique

Cette étude démontre qu'un logged dataset peut être exponentiellement peu informatif sur la valeur d'une politique cible lorsque le logger dépend de l'historique. Les auteurs construisent des POMDPs où, malgré une couverture d'action constante, l'évaluation précise nécessite un nombre d'épisodes logarithmique exponentiel par rapport à l'horizon. Ce résultat établit l'intractabilité du cas avec logging dépendant de l'historique.