Cette séance de cours couvre le concept d'entropie, qui mesure le désordre d'une variable aléatoire, et ses applications dans la science des données. Il s'inscrit également dans la théorie de la famille exponentielle et de l'échantillonnage, en discutant des propriétés des distributions exponentielles et de leurs paramétrisations. La séance de cours examine comment les statistiques obtenues à partir d'échantillons peuvent fournir des informations sur des paramètres inconnus, en mettant l'accent sur l'importance des distributions d'échantillons et des statistiques auxiliaires.