Séance de cours
Réseaux neuronaux sous SGD
Description
Cette séance de cours couvre l'optimisation des réseaux neuronaux en utilisant la descente de gradient stochastique (SGD). L'instructeur explique le concept de risque double par rapport au risque empirique, l'évolution de la sparsity, et la vitesse et la direction du flux de gradient. La séance de cours explore la relation entre le gradient et la vitesse, la discrétisation des équations et la divergence dans le contexte des réseaux neuronaux.
Source officielle
À propos de ce résultat
Cette page est générée automatiquement et peut contenir des informations qui ne sont pas correctes, complètes, à jour ou pertinentes par rapport à votre recherche. Il en va de même pour toutes les autres pages de ce site. Veillez à vérifier les informations auprès des sources officielles de l'EPFL.