Cette séance de cours couvre le concept de frapper les probabilités dans les chaînes Markov, y compris la solution minimale non négative du système, la preuve de frapper les probabilités, et les relations récursives. Il s'inscrit également dans le calcul des temps de frappe et des propriétés des probabilités de frappe.