Systèmes de connaissances non conceptuels

Cette séance de cours explore les succès récents de l'apprentissage profond et son impact sur les humanités numériques, en se concentrant sur l'encodage / décodage des systèmes d'écriture et des images. Il se penche sur l'émergence de la connaissance non conceptuelle, ses caractéristiques et son application dans le raisonnement articulé. La séance de cours aborde les défis de la mise à la terre des données du monde réel en symboles logiques et le potentiel des connaissances non conceptuelles dans l'exécution de tâches complexes. Il met également en évidence les progrès récents dans les systèmes de connaissances non conceptuels, tels que la traduction automatique neuronale et la PNL non supervisée. La séance de cours se termine en examinant les limites des réseaux neuronaux récurrents, l’introduction des transformateurs et les capacités révolutionnaires du GPT-3 dans l’économie de l’attention et l’apprentissage à court terme.