Séance de cours

Analyse du modèle

Description

Cette séance de cours explore l'analyse des modèles neuronaux dans le traitement du langage naturel, en explorant des sujets tels que l'évaluation des modèles, les sujets de test linguistique, les réseaux neuronaux de sondage et l'analyse des ablations. Il couvre limportance de comprendre le comportement du modèle, lémergence de composants darchitecture interprétables, et les tendances par couche dans la précision de sondage. L'instructeur discute de l'importance des études de sondage, des analyses de corrélation et de l'impact des têtes d'attention dans les modèles de transformateurs. La séance de cours se termine par un aperçu de la complexité des modèles neuronaux et de l’approche critique nécessaire à l’interprétation des modèles.

Cette vidéo est disponible exclusivement sur Mediaspace pour un public restreint. Veuillez vous connecter à Mediaspace pour y accéder si vous disposez des autorisations nécessaires.

Regarder sur Mediaspace
À propos de ce résultat
Cette page est générée automatiquement et peut contenir des informations qui ne sont pas correctes, complètes, à jour ou pertinentes par rapport à votre recherche. Il en va de même pour toutes les autres pages de ce site. Veillez à vérifier les informations auprès des sources officielles de l'EPFL.