Retour aux notes de labo
Notes de labo / Apprentissage par renforcement avec Taxi-v3

Une comparaison équitable exige un protocole commun

Les sorties comprennent 39 réussites sur 100 épisodes pour Monte Carlo et 200 sur 200 pour Q-learning, dans des conditions différentes.

Conséquence pratique

Comparer avec les mêmes départs, limites et effectifs, sur plusieurs graines.

01

Question

Les sorties Monte Carlo et Q-learning disponibles permettent-elles de classer fiablement les méthodes ?

02

Expérience

Les sorties Taxi-v3 sauvegardées comptent les épisodes réussis pour Monte Carlo et Q-learning. Les graines et parfois les effectifs d’évaluation diffèrent.

03

Résultats enregistrés

Exécutions enregistrées avec des graines et des effectifs différents ; ces proportions ne constituent pas une comparaison contrôlée.
MéthodeRéussites enregistrées
Monte Carlo39 / 100 épisodes
Q-learning200 / 200 épisodes

Limites

L’implémentation appelée « first-visit Monte-Carlo » doit être corrigée avant une nouvelle comparaison. Les effectifs seuls ne démontrent pas une performance générale.

04

Interprétation

Les sorties décrivent les exécutions disponibles. Les conditions d’évaluation différentes ne permettent pas de classer rigoureusement les algorithmes.

Conséquence pratique

Comparer avec les mêmes départs, limites et effectifs, sur plusieurs graines.

05

Prochaine expérience

Corriger l’implémentation first-visit Monte Carlo, puis évaluer les deux méthodes depuis les mêmes états initiaux, avec les mêmes limites et effectifs, sur plusieurs graines.

06

Origine et contribution

Projet pédagogique d’apprentissage par renforcement avec Taxi-v3. Effectifs issus de la synthèse éditoriale des sorties sauvegardées fournie pour cette mise à jour ; les notebooks ne sont pas dans ce dépôt.

Le code d’apprentissage d’origine et la contribution personnelle précise restent à vérifier. Le labo Taxi du navigateur est une reconstruction de référence distincte, pas une politique entraînée.

ProjetApprentissage par renforcement avec Taxi-v3Explorer le projet