Séance de cours
Cette séance de cours couvre les chaînes de Markov avec des classes absorbantes, en se concentrant sur des exercices liés aux probabilités appliquées et aux processus stochastiques. Les diapositives présentent des exercices sur la recherche de classes ouvertes et fermées dans une matrice de probabilité de transition, le calcul des valeurs attendues et l'analyse du comportement d'une grenouille sautillant sur des nénuphars. L'instructeur discute de la représentation graphique des chaînes de Markov, cubbing matrices de transition, et de résoudre le problème de ruine du joueur. Grâce à des exemples pratiques, les élèves apprennent à déterminer les probabilités de rester dans un état, d'atteindre un état spécifique et le temps moyen pour atteindre une destination.