On weak convergence of Gaussian conditional distributions
Lumpp, Drton
Weak convergence of joint distributions generally does not imply convergence of conditional distributions. In particular, conditional distributions need not converge when joint Gaussian distributions converge to a singular Gaussian limit. Algebraically, this is due to the fact that at singular covariance matrices, Schur complements are not continuous functions of the matrix entries. Our results lay out special conditions under which convergence of Gaussian conditional distributions nevertheless occurs, and we exemplify how this allows one to reason about conditional independence in a new class of graphical models.
academic
Über schwache Konvergenz von bedingten Gaußschen Verteilungen
Die schwache Konvergenz von Gelenkverteilungen impliziert in der Regel nicht die Konvergenz von bedingten Verteilungen. Insbesondere wenn gemeinsame Gaußsche Verteilungen gegen eine singuläre Gaußsche Grenzverteilung konvergieren, konvergieren die bedingten Verteilungen nicht notwendigerweise. Aus algebraischer Perspektive liegt dies daran, dass das Schur-Komplement bei singulären Kovarianzmatrizen keine stetige Funktion der Matrixelemente ist. Die Ergebnisse dieser Arbeit erläutern spezielle Bedingungen, unter denen Gaußsche bedingte Verteilungen dennoch konvergieren, und zeigen durch Beispiele, wie dies es ermöglicht, in einer neuen Klasse von Graphenmodellen über bedingte Unabhängigkeit zu argumentieren.
Das Kernproblem dieser Untersuchung ist: Wenn eine Folge von Gaußschen Verteilungen X(m)∼N(0,Σ(m)) schwach gegen eine singuläre Gaußsche Verteilung X∼N(0,Σ) konvergiert, konvergieren dann die bedingten Verteilungen N(0,ΣR∣S(m)) gegen N(0,ΣR∣S)?
Theoretische Relevanz: Die Konvergenz bedingter Verteilungen ist ein grundlegendes Problem der Wahrscheinlichkeitstheorie und von großer Bedeutung für das Verständnis des Grenzverhaltens von Verteilungen
Anwendungswert: In Graphenmodellen hängt die Analyse von bedingter Unabhängigkeit von den Eigenschaften bedingter Verteilungen ab, besonders in neuartigen Graphenmodellen, die durch kontinuierliche Lyapunov-Gleichungen definiert werden
Unstetigkeit im allgemeinen Fall: Die Pseudoinverse (⋅)+ ist bei singulären Matrizen unstetig, was dazu führt, dass die bedingte Kovarianzmatrix ΣR∣S=ΣR,R−ΣR,S(ΣS,S)+ΣS,R möglicherweise nicht konvergiert
Einschränkungen in Spezialfällen: Bekannte Ergebnisse gelten hauptsächlich für Matrixfolgen konstanten Ranges, während in praktischen Anwendungen häufig Matrizen vollen Ranges gegen singuläre Matrizen konvergieren
Inspiriert durch die Arbeiten von Boege et al. (2025) zur bedingten Unabhängigkeit betrachten die Autoren den anspruchsvolleren Fall: Jede Σ(m) ist invertierbar, während die Grenz-Kovarianzmatrix Σ singulär ist.
Konvergenzbedingungen etablieren: Ausreichende Bedingungen für die Konvergenz Gaußscher bedingter Verteilungen werden vorgestellt, auch im singulären Grenzfall
Verallgemeinerung des Matrixdeterminanten-Lemmas: Eine erweiterte Version des Matrixdeterminanten-Lemmas wird entwickelt, um das asymptotische Verhalten singulärer Matrizen zu analysieren
Anwendung auf Graphenmodelle: Die Anwendung der theoretischen Ergebnisse auf die Analyse bedingter Unabhängigkeit in Graphenmodellen, die durch kontinuierliche Lyapunov-Gleichungen definiert werden, wird demonstriert
Spezialfall Toeplitz-Matrizen: Ein intuitiver alternativer Beweis wird für spezielle Toeplitz-Matrizen bereitgestellt
Gegeben ist eine Folge von Gaußschen Zufallsvektoren X(m)∼N(0,Σ(m)), die schwach gegen X∼N(0,Σ) konvergiert, wobei Σ(m) invertierbar, aber Σ singulär ist. Für disjunkte Teilmengen S,R⊆[p] ist zu bestimmen, ob die bedingte Kovarianzmatrix ΣR∣S(m) gegen ΣR∣S konvergiert.
Sei Σ(m) eine Folge invertierbarer symmetrischer p×p-Matrizen mit singulärer Grenzmatrix Σ und Entwicklung:
Σ(m)=Σ+m1Σ(1,∞)+o(m1)
Für S⊂[p] mit k=∣S∣<p, R=[p]∖S, konvergiert die bedingte Kovarianzmatrix ΣR∣S(m) gegen ΣR∣S, wenn die Matrizen Σ und Σ(1,∞) folgende Bedingungen erfüllen:
(i)f(U,ΣS,S(1,∞))=0, wobei U aus der symmetrischen Rangzerlegung ΣS,S=UBUT stammt (ii)im(ΣS,R)⊆im(ΣS,S)
Jedes Element der bedingten Kovarianzmatrix wird als:
vmTAm−1wm=det(Am)det(Am[j])
ausgedrückt und das asymptotische Verhalten von Zähler und Nenner wird analysiert, um die Konvergenz zu beweisen.
Betrachtet werden Gaußsche Verteilungen, die die kontinuierliche Lyapunov-Gleichung erfüllen:
MΣ+ΣMT+2Ip=0
wobei M eine stabile Matrix ist, deren Nullmuster die Graphenstruktur kodiert.
Proposition 4.2 (Proposition 4.5 von Boege et al. 2025): Für jeden Trek beliebiger Länge T:1←⋅⋅⋅→p existiert eine Kovarianzmatrix Σ, die die kontinuierliche Lyapunov-Gleichung erfüllt, so dass X1⊥Xp∣X2,…,Xp−1.
Der Beweis wird durch die Konstruktion einer Matrixfolge M(m) erbracht, so dass die entsprechenden Lösungen die Bedingungen von Satz 1.2 erfüllen und somit die bedingte Unabhängigkeit nicht besteht.
Unter bestimmten Bedingungen konvergieren Gaußsche bedingte Verteilungen auch dann, wenn die Grenz-Kovarianzmatrix singulär ist
Bedingung (i) stellt sicher, dass der Nenner des Schur-Komplements nicht gegen Null geht, Bedingung (ii) gewährleistet die Kompatibilität der Bildräume
Die theoretischen Ergebnisse werden erfolgreich auf die Analyse bedingter Unabhängigkeit in kontinuierlichen Lyapunov-Graphenmodellen angewendet
Theoretische Strenge: Bietet einen vollständigen mathematischen Beweisrahmen, von der Verallgemeinerung des Matrixdeterminanten-Lemmas bis zum Hauptsatz
Praktischer Wert: Löst praktische Probleme in Graphenmodellen, insbesondere die Anwendung auf kontinuierliche Lyapunov-Gleichungen
Methodische Innovation: Geschickte Kombination von Matrixanalyse, Wahrscheinlichkeitstheorie und Graphentheorie
Klare Darstellung: Die Papierstruktur ist klar, mit reichhaltigen Beispielen, die das Verständnis erleichtern
Das Papier zitiert mehrere wichtige verwandte Arbeiten, darunter:
Ben-Israel and Greville (2003): Theorie der verallgemeinerten Inversen
Lauritzen (1996, 2024): Graphenmodelle und Theorie bedingter Verteilungen
Boege et al. (2025): Anwendung bedingter Unabhängigkeit in Diffusionsprozessen
Stewart (1969): Stetigkeitstheorie der verallgemeinerten Inversen
Dieses Papier leistet wichtige Beiträge auf theoretischer und anwendungsorientierter Ebene und bietet neue mathematische Werkzeuge zum Verständnis des Verhaltens bedingter Verteilungen unter singulären Grenzen mit erfolgreicher Anwendung auf die Analyse bedingter Unabhängigkeit in Graphenmodellen.