Cette séance de cours couvre les bases des chaînes de Markov, y compris les principaux concepts tels que la distribution d'état, les chaînes ergodiques et l'échantillonnage d'importance. Il explore également les applications algorithmiques et les méthodes d'échantillonnage telles que Monte Carlo et l'échantillonnage de rejet.