Cette séance de cours couvre des exemples liés aux temps de frappe dans les chaînes de Markov, en commençant par un espace d'état simple de quatre points, puis en passant à des scénarios plus complexes impliquant des espaces d'état infinis et des serpents et des échelles. L'instructeur montre comment calculer les probabilités de frapper des états spécifiques et le nombre attendu d'étapes avant d'atteindre un certain état.