Statistical Learning with Mixture-of-Experts: From Sparse Regularized Estimation in High-Dimensional and Functional Settings to Frugal Distributed Aggregation
Catégorie d'évènement : Séminaire Probabilités et Statistique Date/heure : 26 mars 2026 09:15-10:15 Lieu : Salle de conférences Nancy Oratrice ou orateur : Faïcel Chamroukhi (Caen et Paris Saclay) Résumé :Modern statistical learning problems often involve heterogeneous, high-dimensional, or distributed data, raising two complementary challenges: controlling model complexity in high dimensions, and enabling frugal inference under distributional constraints, while preserving both structure and statistical consistency.
In this talk, I present contributions centered on mixture-of-experts (MoE) models, a flexible latent variable framework with well-established approximation capabilities and learning guarantees for conditional densities.
I first consider MoE models with high-dimensional predictors, including functional data such as curves and time series, and their training via Lasso-type regularization in unsupervised settings, enabling sparse and interpretable representations together with non-asymptotic model selection guarantees.
I then address learning from data distributed across multiple sites due to storage, computational, or governance constraints, and present a frugal aggregation strategy for MoE models based on optimal transport, which constructs a reduced global estimator from locally trained models in a single communication round while preserving both model structure and statistical consistency, making it particularly well suited to large-scale settings where communication is a major bottleneck.
Together, these contributions position MoE as a unified framework for principled, interpretable, and scalable statistical learning, with perspectives on frugal learning of generative models at the interface of modern machine learning and AI, and applications in constrained industrial environments.
[exposé en français.]
A construction of the sine-Gordon model above 6pi
Catégorie d'évènement : Séminaire Probabilités et Statistique Date/heure : 26 mars 2026 10:45-11:45 Lieu : Salle de conférences Nancy Oratrice ou orateur : Sarah-Jean Meyer (Oxford) Résumé :I will present a construction of the Euclidean sine–Gordon quantum field theory using probabilistic methods. The approach formulates the model through a stochastic control problem and a weak forward–backward stochastic differential equation (FBSDE). The starting point is a detailed study of the perturbation theory associated with the sine–Gordon potential across the full subcritical regime. For a portion of the subcritical regime extending above 6π, the construction can be made rigorous beyond perturbation theory using a stochastic control problem. I will explain the different regimes of the model and why we currently cannot construct the model in the full subcritical regime.
A venir
Catégorie d'évènement : Séminaire de Théorie des Nombres de Nancy-Metz Date/heure : 26 mars 2026 14:30-15:30 Lieu : Salle Döblin Oratrice ou orateur : Michel Balazard (Institut de Mathématiques de Marseille) Résumé :La méthode de Wen Chao Lu pour le théorème des nombres premiers
Catégorie d'évènement : Séminaire de Théorie des Nombres de Nancy-Metz Date/heure : 26 mars 2026 14:30-15:30 Lieu : Salle Döblin Oratrice ou orateur : Michel Balazard (CNRS, Marseille) Résumé :En 1999, Wen Chao Lu a donné une démonstration par l’analyse réelle du théorème des nombres premiers avec terme d’erreur, “à epsilon près” celui obtenu un siècle auparavant par La Vallée Poussin au moyen de l’analyse complexe. En 2024, Gozé a, dans sa thèse, donné une version quantitative de ce résultat.
Dans un travail en cours avec Gozé et Bruno Martin, nous reprenons les démonstrations de Lu et Gozé, et tentons d’en dégager les idées essentielles. L’exposé présentera sous une forme simple certaines d’entre elles.