Traces d'éligibilité

Cette séance de cours présente les traces de l'éligibilité, un concept d'une importance pratique énorme dans l'apprentissage par renforcement. L’instructeur explique comment les traces d’admissibilité permettent aux informations sur les récompenses de voyager plus rapidement, en abordant le problème du flux d’informations lent dans les algorithmes de TD en ligne. La solution présentée est l'utilisation de traces d'éligibilité dans SARSA(2), où la mémoire des paires état-action précédentes est conservée et mise à jour au fil du temps. La séance de cours couvre la mise en œuvre des traces d'éligibilité dans SARSA(2) et fournit une explication détaillée de l'algorithme. Un quiz à la fin teste la compréhension des traces d'éligibilité et leur rôle dans l'apprentissage de renforcement.