Publication

Phase diagram of Stochastic Gradient Descent in high-dimensional two-layer neural networks

Publications associées (78)

À propos
Confidentialité
Mentions légales

Graph Chatbot

Chattez avec Graph Search

Posez n’importe quelle question sur les cours, conférences, exercices, recherches, actualités, etc. de l’EPFL ou essayez les exemples de questions ci-dessous.

AVERTISSEMENT : Le chatbot Graph n'est pas programmé pour fournir des réponses explicites ou catégoriques à vos questions. Il transforme plutôt vos questions en demandes API qui sont distribuées aux différents services informatiques officiellement administrés par l'EPFL. Son but est uniquement de collecter et de recommander des références pertinentes à des contenus que vous pouvez explorer pour vous aider à répondre à vos questions.

Connectez-vous pour utiliser Chat avec Graph Search

Phase diagram of Stochastic Gradient Descent in high-dimensional two-layer neural networks

Graph Chatbot

Chattez avec Graph Search

Complex Dynamics in Simple Neural Networks: Understanding Gradient Flow in Phase Retrieval

A jamming transition from under- to over-parametrization affects generalization in deep learning

Jamming transition as a paradigm to understand the loss landscape of deep neural networks

Diffusion Learning In Non-Convex Environments

Local SGD Converges Fast and Communicates Little

Shape optimisation of technical devices via gradient descent using convolutional neural network proxies

Polynomial Escape-Time From Saddle Points In Distributed Non-Convex Optimization

The committee machine: Computational to statistical gaps in learning a two-layers neural network

Neural Tanget Kernel: Convergence and Generalization in Neural Networks

SLANG: Fast Structured Covariance Approximations for Bayesian Deep Learning with Natural Gradient