On weak convergence of Gaussian conditional distributions
Lumpp, Drton
Weak convergence of joint distributions generally does not imply convergence of conditional distributions. In particular, conditional distributions need not converge when joint Gaussian distributions converge to a singular Gaussian limit. Algebraically, this is due to the fact that at singular covariance matrices, Schur complements are not continuous functions of the matrix entries. Our results lay out special conditions under which convergence of Gaussian conditional distributions nevertheless occurs, and we exemplify how this allows one to reason about conditional independence in a new class of graphical models.
academic
Sur la convergence faible des distributions conditionnelles gaussiennes
La convergence faible d'une distribution conjointe n'implique généralement pas la convergence des distributions conditionnelles. En particulier, lorsque les distributions gaussiennes conjointes convergent vers une limite gaussienne singulière, les distributions conditionnelles ne convergent pas nécessairement. D'un point de vue algébrique, cela est dû au fait que le complément de Schur n'est pas une fonction continue des éléments de la matrice au niveau des matrices de covariance singulières. Les résultats de cet article élucident les conditions spéciales sous lesquelles les distributions conditionnelles gaussiennes convergent néanmoins, et illustrent comment cela permet de raisonner sur l'indépendance conditionnelle dans une nouvelle classe de modèles graphiques.
Le problème fondamental abordé par cette recherche est le suivant : lorsqu'une séquence de distributions gaussiennes X(m)∼N(0,Σ(m)) converge faiblement vers une distribution gaussienne singulière X∼N(0,Σ), les distributions conditionnelles N(0,ΣR∣S(m)) convergent-elles vers N(0,ΣR∣S) ?
Signification théorique : La convergence des distributions conditionnelles est une question fondamentale en théorie des probabilités, essentielle pour comprendre le comportement limite des distributions
Valeur applicative : Dans les modèles graphiques, l'analyse de l'indépendance conditionnelle dépend des propriétés des distributions conditionnelles, particulièrement dans les nouveaux modèles graphiques définis par l'équation de Lyapunov continue
Discontinuité dans le cas général : L'opération de pseudo-inverse (⋅)+ n'est pas continue aux matrices singulières, ce qui peut entraîner la non-convergence de la matrice de covariance conditionnelle ΣR∣S=ΣR,R−ΣR,S(ΣS,S)+ΣS,R
Restrictions des cas particuliers : Les résultats connus s'appliquent principalement aux séquences de matrices de rang constant, tandis que les applications pratiques rencontrent souvent des matrices de rang complet convergeant vers des matrices singulières
Inspirés par les travaux de Boege et al. (2025) sur l'indépendance conditionnelle, les auteurs considèrent le cas plus difficile où chaque Σ(m) est de rang complet, tandis que la matrice de covariance limite Σ est singulière.
Établissement des conditions de convergence : Proposition de conditions suffisantes pour la convergence des distributions conditionnelles gaussiennes, même dans le cas de limites singulières
Généralisation du lemme du déterminant matriciel : Développement d'une version généralisée du lemme du déterminant matriciel pour analyser le comportement asymptotique des matrices singulières
Application aux modèles graphiques : Démonstration de l'application des résultats théoriques à l'analyse de l'indépendance conditionnelle dans les modèles graphiques définis par l'équation de Lyapunov continue
Cas particulier des matrices de Toeplitz : Fourniture d'une preuve alternative intuitive pour les matrices de Toeplitz spéciales
Étant donnée une séquence de vecteurs aléatoires gaussiens X(m)∼N(0,Σ(m)) convergeant faiblement vers X∼N(0,Σ), où Σ(m) est inversible mais Σ est singulière. Pour les sous-ensembles disjoints S,R⊆[p], déterminer si les matrices de covariance conditionnelle ΣR∣S(m) convergent vers ΣR∣S.
En exprimant chaque élément de la matrice de covariance conditionnelle comme :
vmTAm−1wm=det(Am)det(Am[j])
et en analysant le comportement asymptotique du numérateur et du dénominateur pour prouver la convergence.
Considérer les distributions gaussiennes satisfaisant l'équation de Lyapunov continue :
MΣ+ΣMT+2Ip=0
où M est une matrice stable dont le motif zéro encode la structure graphique.
Proposition 4.2 (Proposition 4.5 de Boege et al. 2025) : Pour tout trek de longueur arbitraire T:1←⋅⋅⋅→p, il existe une matrice de covariance Σ satisfaisant l'équation de Lyapunov continue telle que X1⊥Xp∣X2,…,Xp−1.
La preuve procède par construction d'une séquence de matrices M(m) telle que les solutions correspondantes satisfont les conditions du Théorème 1.2, garantissant ainsi que l'indépendance conditionnelle ne tient pas.
Sous certaines conditions, même si la matrice de covariance limite est singulière, les distributions conditionnelles gaussiennes peuvent converger
La condition (i) assure que le dénominateur du complément de Schur ne tend pas vers zéro, tandis que la condition (ii) garantit la compatibilité des espaces images
Les résultats théoriques s'appliquent avec succès à l'analyse de l'indépendance conditionnelle dans les modèles graphiques d'équation de Lyapunov continue
Rigueur théorique : Fourniture d'un cadre de preuve mathématique complet, allant de la généralisation du lemme du déterminant matriciel au théorème principal
Valeur pratique : Résolution de problèmes réels dans les modèles graphiques, particulièrement l'application de l'équation de Lyapunov continue
Innovation méthodologique : Combinaison ingénieuse de l'analyse matricielle, de la théorie des probabilités et de la théorie des graphes
Clarté rédactionnelle : Structure claire de l'article, exemples abondants, facilitant la compréhension
L'article cite plusieurs travaux connexes importants, notamment :
Ben-Israel et Greville (2003) : Théorie des inverses généralisées
Lauritzen (1996, 2024) : Théorie des modèles graphiques et distributions conditionnelles
Boege et al. (2025) : Application de l'indépendance conditionnelle aux processus de diffusion
Stewart (1969) : Théorie de la continuité des inverses généralisées
Cet article apporte des contributions importantes tant sur le plan théorique qu'applicatif, fournissant de nouveaux outils mathématiques pour comprendre le comportement des distributions conditionnelles sous limites singulières, et s'applique avec succès à l'analyse de l'indépendance conditionnelle dans les modèles graphiques.