Cette séance de cours couvre la génération de processus de Markov, en se concentrant sur les fonctions de densité de transition, les chaînes de Markov à temps continu et discret, les processus de Poisson et la caractérisation des processus de Poisson. Il explore également le processus de Poisson non homogène et la chaîne générale de Markov en espace discret en temps continu.