Cette séance de cours couvre Deep Q-learning, une implémentation simple de Q-learning dans les réseaux neuronaux profonds. Les sujets abordés incluent l'application de l'apprentissage Q profond dans des jeux comme Chess and Go, la rétropropagation pour l'apprentissage Q profond, l'examen des valeurs Q et V, les conditions de cohérence de l'équation de Bellman et la fonction semi-gradient sur erreur. La séance de cours se termine par un résumé de Deep Q-learning et des lectures recommandées.