2025-11-25T13:52:17.039270

On weak convergence of Gaussian conditional distributions

Lumpp, Drton
Weak convergence of joint distributions generally does not imply convergence of conditional distributions. In particular, conditional distributions need not converge when joint Gaussian distributions converge to a singular Gaussian limit. Algebraically, this is due to the fact that at singular covariance matrices, Schur complements are not continuous functions of the matrix entries. Our results lay out special conditions under which convergence of Gaussian conditional distributions nevertheless occurs, and we exemplify how this allows one to reason about conditional independence in a new class of graphical models.
academic

О слабой сходимости условных гауссовских распределений

Основная информация

  • ID статьи: 2510.12412
  • Название: On weak convergence of Gaussian conditional distributions
  • Авторы: Sarah Lumpp, Mathias Drton
  • Классификация: math.ST stat.TH
  • Дата публикации: 14 октября 2025 г. (препринт arXiv)
  • Ссылка на статью: https://arxiv.org/abs/2510.12412

Аннотация

Слабая сходимость совместного распределения обычно не влечёт сходимость условных распределений. В частности, когда совместные гауссовские распределения сходятся к сингулярному гауссовскому пределу, условные распределения не обязательно сходятся. С алгебраической точки зрения это объясняется тем, что дополнение Шура не является непрерывной функцией элементов матрицы в точке сингулярной матрицы ковариаций. Результаты данной работы выясняют специальные условия, при которых условные гауссовские распределения всё же сходятся, и демонстрируют, как это позволяет анализировать условную независимость в новом классе графических моделей.

Исследовательский контекст и мотивация

Основная проблема

Центральная проблема исследования: когда последовательность гауссовских распределений X(m)N(0,Σ(m))X^{(m)} \sim N(0, Σ^{(m)}) слабо сходится к сингулярному гауссовскому распределению XN(0,Σ)X \sim N(0, Σ), сходятся ли условные распределения N(0,ΣRS(m))N(0, Σ_{R|S}^{(m)}) к N(0,ΣRS)N(0, Σ_{R|S})?

Значимость проблемы

  1. Теоретическое значение: Сходимость условных распределений является фундаментальной проблемой теории вероятностей, имеющей важное значение для понимания предельного поведения распределений
  2. Прикладная ценность: В графических моделях анализ условной независимости зависит от свойств условных распределений, особенно в новых типах графических моделей, определяемых непрерывным уравнением Ляпунова

Ограничения существующих методов

  1. Разрывность в общем случае: Операция псевдообращения ()+(·)^+ разрывна в сингулярных матрицах, что приводит к возможной несходимости матрицы условной ковариации ΣRS=ΣR,RΣR,S(ΣS,S)+ΣS,RΣ_{R|S} = Σ_{R,R} - Σ_{R,S}(Σ_{S,S})^+Σ_{S,R}
  2. Ограничения специальных случаев: Известные результаты применимы в основном к последовательностям матриц постоянного ранга, тогда как на практике часто встречаются случаи сходимости полноранговых матриц к сингулярной матрице

Исследовательская мотивация

Вдохновлённые работой Boege et al. (2025) по условной независимости, авторы рассматривают более сложный случай: каждая матрица Σ(m)Σ^{(m)} полноранговая, а предельная матрица ковариации ΣΣ сингулярна.

Основные вклады

  1. Установление условий сходимости: Предложены достаточные условия сходимости условных гауссовских распределений даже в случае сингулярного предела
  2. Обобщение леммы о детерминанте матрицы: Разработана обобщённая версия леммы о детерминанте матрицы для анализа асимптотического поведения сингулярных матриц
  3. Применение к графическим моделям: Продемонстрировано применение теоретических результатов к анализу условной независимости в графических моделях, определяемых непрерывным уравнением Ляпунова
  4. Частный случай матриц Теплица: Предоставлено интуитивное альтернативное доказательство для специальных матриц Теплица

Подробное описание методов

Постановка задачи

Дана последовательность гауссовских случайных векторов X(m)N(0,Σ(m))X^{(m)} \sim N(0, Σ^{(m)}), слабо сходящаяся к XN(0,Σ)X \sim N(0, Σ), где Σ(m)Σ^{(m)} обратима, но ΣΣ сингулярна. Для непересекающихся подмножеств S,R[p]S, R ⊆ [p] требуется определить, сходятся ли матрицы условной ковариации ΣRS(m)Σ_{R|S}^{(m)} к ΣRSΣ_{R|S}.

Основные теоретические результаты

Главная теорема (Теорема 1.2)

Пусть Σ(m)Σ^{(m)} — последовательность обратимых симметричных матриц размера p×pp×p с сингулярным пределом ΣΣ, удовлетворяющая разложению: Σ(m)=Σ+1mΣ(1,)+o(1m)Σ^{(m)} = Σ + \frac{1}{m}Σ^{(1,∞)} + o\left(\frac{1}{m}\right)

Для S[p]S ⊂ [p] с k=S<pk = |S| < p, R=[p]SR = [p] \setminus S, если матрицы ΣΣ и Σ(1,)Σ^{(1,∞)} удовлетворяют:

(i) f(U,ΣS,S(1,))0f(U, Σ_{S,S}^{(1,∞)}) ≠ 0, где UU получена из симметричного разложения по рангу ΣS,S=UBUTΣ_{S,S} = UBU^T
(ii) im(ΣS,R)im(ΣS,S)\text{im}(Σ_{S,R}) ⊆ \text{im}(Σ_{S,S})

то матрица условной ковариации ΣRS(m)Σ_{R|S}^{(m)} сходится к ΣRSΣ_{R|S}.

Определение ключевой функции

Функция f:Rk×r×Rk×kRf: \mathbb{R}^{k×r} × \mathbb{R}^{k×k} → \mathbb{R} определяется как: f(U,G)=(1)s([kr])α[k]α=kr(1)s(α)det(G[k],αU)det(U[k]α,[r])f(U,G) = (-1)^{s([k-r])} \sum_{\substack{α⊆[k] \\ |α|=k-r}} (-1)^{s(α)} \det\begin{pmatrix} G_{[k],α} & U \end{pmatrix} \det(U_{[k]\setminus α,[r]})

Технические инновации

1. Обобщение леммы о детерминанте матрицы

Лемма 3.1: Для матриц U,VRk×rU, V ∈ \mathbb{R}^{k×r}, GRk×kG ∈ \mathbb{R}^{k×k}, BRr×rB ∈ \mathbb{R}^{r×r}, где r<kr < k: det(UBVT+1mG)=1mkrdet(B)fasy(U,V,G)+o(1mkr)\det\left(UBV^T + \frac{1}{m}G\right) = \frac{1}{m^{k-r}} \cdot \det(B) \cdot f_{\text{asy}}(U, V, G) + o\left(\frac{1}{m^{k-r}}\right)

2. Применение правила Крамера

Каждый элемент матрицы условной ковариации представляется как: vmTAm1wm=det(Am[j])det(Am)v_m^T A_m^{-1} w_m = \frac{\det(A_m[j])}{\det(A_m)} и анализируется асимптотическое поведение числителя и знаменателя для доказательства сходимости.

3. Обработка шума

Лемма 3.2 обрабатывает влияние дополнительных членов шума D(m)=o(1/m)D^{(m)} = o(1/m), обеспечивая, что главные асимптотические члены не нарушаются.

Экспериментальная установка

Область применения: непрерывное уравнение Ляпунова

Рассматриваются гауссовские распределения, удовлетворяющие непрерывному уравнению Ляпунова: MΣ+ΣMT+2Ip=0MΣ + ΣM^T + 2I_p = 0 где MM — стабильная матрица, чей нулевой паттерн кодирует структуру графа.

Конкретные примеры

Пример 2.1: Trek T4:1234T_4: 1 ← 2 → 3 → 4

Построена стабильная матрица: M4=(1100010001100011)M_4 = \begin{pmatrix} -1 & 1 & 0 & 0 \\ 0 & -1 & 0 & 0 \\ 0 & 1 & -1 & 0 \\ 0 & 0 & 1 & -1 \end{pmatrix}

Получено решение: Σ4=(3/21/21/23/81/211/21/41/21/23/27/83/81/47/815/8)Σ_4 = \begin{pmatrix} 3/2 & 1/2 & 1/2 & 3/8 \\ 1/2 & 1 & 1/2 & 1/4 \\ 1/2 & 1/2 & 3/2 & 7/8 \\ 3/8 & 1/4 & 7/8 & 15/8 \end{pmatrix}

Проверено, что (Σ4)1423=1/100(Σ_4)_{14|23} = 1/10 ≠ 0.

Экспериментальные результаты

Применение к матрицам Теплица

Для nn-мерной симметричной матрицы Теплица: Tn=(ij)i,j=1,,nT_n = (-|i-j|)_{i,j=1,\ldots,n}

Лемма 4.1 доказывает, что для специальных матриц UU и GG: f(U,G)=2k+1{1,nl}{1,nr}0f(U,G) = 2^{k+1-|\{1,n_l\}|-|\{1,n_r\}|} ≠ 0

Проверка основных результатов

Предложение 4.2 (Предложение 4.5 из Boege et al. 2025): Для trek произвольной длины T:1pT: 1 ← ··· → p существует матрица ковариации ΣΣ, удовлетворяющая непрерывному уравнению Ляпунова, такая что X1⊥̸XpX2,,Xp1X_1 \not\perp X_p | X_2, \ldots, X_{p-1}.

Доказательство осуществляется путём построения последовательности матриц M(m)M^{(m)}, таких что соответствующие решения удовлетворяют условиям Теоремы 1.2, гарантируя, что условная независимость не имеет места.

Связанные работы

Теоретические основы

  1. Stewart (1969), Ben-Israel and Greville (2003): Непрерывность псевдообратной для последовательностей матриц постоянного ранга
  2. Lauritzen (1996, 2024): Общая теория сходимости условных распределений
  3. Bérczi et al. (2023): Данная работа обобщает результаты из раздела 7

Прикладной контекст

  1. Dettling et al. (2023), Varando and Hansen (2020): Графические модели непрерывного Ляпунова
  2. Boege et al. (2025): Характеризация условной независимости в графических моделях

Заключение и обсуждение

Основные выводы

  1. При специальных условиях условные гауссовские распределения сходятся даже при сингулярной предельной матрице ковариации
  2. Условие (i) гарантирует, что знаменатель дополнения Шура не стремится к нулю, условие (ii) обеспечивает совместимость пространств образов
  3. Теоретические результаты успешно применены к анализу условной независимости в графических моделях непрерывного Ляпунова

Ограничения

  1. Ограничительность условий: Требуется выполнение специальных условий матричной структуры
  2. Вычислительная сложность: Вычисление функции ff включает многократное суммирование, что может быть затруднительно для больших матриц
  3. Область применения: Применимо в основном к гауссовским распределениям; расширение на другие семейства распределений неизвестно

Направления будущих исследований

  1. Ослабление условий: Поиск более общих условий сходимости
  2. Оптимизация вычислений: Разработка более эффективных алгоритмов проверки условий
  3. Расширение на негауссовский случай: Обобщение результатов на другие семейства распределений

Глубокая оценка

Преимущества

  1. Теоретическая строгость: Предоставлена полная математическая схема доказательства, от обобщения леммы о детерминанте до главной теоремы
  2. Практическая ценность: Решена реальная проблема в графических моделях, особенно применение к непрерывному уравнению Ляпунова
  3. Методологические инновации: Умелое сочетание матричного анализа, теории вероятностей и теории графов
  4. Ясность изложения: Статья хорошо структурирована, содержит богатые примеры, облегчающие понимание

Недостатки

  1. Сложность условий: Проверка условий теоремы может быть затруднительна, особенно вычисление функции ff
  2. Ограничения применения: Применимо в основном к специальным типам матричных структур; общность требует улучшения
  3. Численная устойчивость: Для близких к сингулярным матриц численные вычисления могут иметь проблемы устойчивости

Влияние

  1. Теоретический вклад: Предоставлены новые теоретические инструменты для сходимости условных распределений при сингулярном пределе
  2. Перспективы применения: Потенциальное применение в графических моделях, анализе временных рядов и других областях
  3. Методологическое вдохновение: Предоставляет новые подходы к решению аналогичных проблем матричных пределов

Области применения

  1. Анализ графических моделей: Особенно модели, определяемые непрерывным уравнением Ляпунова
  2. Временные ряды: Многомерные временные ряды со специальной структурой ковариации
  3. Статистический вывод: Статистические задачи, требующие анализа предельного поведения условных распределений

Библиография

Статья ссылается на множество важных связанных работ, включая:

  • Ben-Israel and Greville (2003): Теория обобщённых обратных матриц
  • Lauritzen (1996, 2024): Теория графических моделей и условных распределений
  • Boege et al. (2025): Применение условной независимости в диффузионных процессах
  • Stewart (1969): Теория непрерывности обобщённых обратных матриц

Данная статья вносит значительный вклад как на теоретическом, так и на прикладном уровнях, предоставляя новые математические инструменты для понимания поведения условных распределений при сингулярном пределе и успешно применяя их к анализу условной независимости в графических моделях.