Applications du GAMP

Cette séance de cours explore l'application de l'algorithme GAMP (Generalized Approximate Message Passing) au problème du lasso, démontrant comment simplifier la version AMP pour la compression du lasso. L'instructeur discute du choix des fonctions, du débruiteur et de l'opérateur proximal, montrant comment cartographier la récursion et analyser l'évolution de l'état de l'algorithme. La séance de cours se penche sur la comparaison des performances des différents algorithmes, les implications des points fixes et les défis posés par les phases difficiles dans les problèmes d'optimisation. Il se termine par un examen détaillé de la machine Kubili et du phénomène de spécialisation dans les réseaux neuronaux.