2025-11-10T02:39:53.675877

Robust extrapolation problem for random processes with stationary increments

Luz, Moklyachuk
The problem of optimal estimation of linear functionals $A ξ=\int_{0}^{\infty} a(t)ξ(t)dt$ and $A_Tξ=\int_{0}^{T} a(t)ξ(t)dt$ depending on the unknown values of random process $ξ(t)$, $t\in R$, with stationary $n$th increments from observations of ttis process for $t<0$ is considered. Formulas for calculating mean square error and spectral characteristic of optimal linear estimation of the functionals are proposed in the case when spectral density is exactly known. Formulas that determine the least favorable spectral densities are proposed for given sets of admissible spectral densities.
academic

Robust extrapolation problem for random processes with stationary increments

基本信息

  • 论文ID: 2510.14003
  • 标题: Robust extrapolation problem for random processes with stationary increments
  • 作者: Maksym Luz, Mikhail Moklyachuk (Taras Shevchenko National University of Kyiv)
  • 分类: math.ST (Statistics Theory)
  • 发表期刊: Mathematics and Statistics 2(2): 78-88, 2014
  • DOI: 10.13189/ms.2014.020204
  • 论文链接: https://arxiv.org/abs/2510.14003

摘要

本文研究了具有平稳n阶增量的随机过程ξ(t)的线性泛函Aξ=0a(t)ξ(t)dtA\xi=\int_0^{\infty}a(t)\xi(t)dtATξ=0Ta(t)ξ(t)dtA_T\xi=\int_0^T a(t)\xi(t)dt的最优估计问题,估计基于对过程在t<0时的观测。在谱密度已知的情况下,提出了计算最优线性估计的均方误差和谱特征的公式。对于给定的可容许谱密度集合,提出了确定最不利谱密度的公式。

研究背景与动机

问题背景

  1. 核心问题:研究具有平稳n阶增量的随机过程的外推问题,特别是基于历史观测数据(t<0)对未来值(t≥0)进行最优估计
  2. 理论基础:建立在Kolmogorov、Wiener、Yaglom等人开创的平稳随机过程理论基础上
  3. 实际需求:在实际应用中,完全获得谱密度信息往往不可能,需要鲁棒的估计方法

研究动机

  1. 经典方法局限性:传统外推方法假设谱密度已知,但实际中谱密度通常未知或不确定
  2. 鲁棒性需求:Vastola和Poor证明了当谱密度估计不准确时,会导致误差显著增加
  3. 理论扩展:将minimax鲁棒方法从平稳过程扩展到具有平稳增量的更一般过程类

核心贡献

  1. 建立了完整的理论框架:为具有平稳n阶增量的随机过程的线性泛函外推问题提供了系统的解决方案
  2. 推导了最优估计公式:在谱密度已知情况下,给出了计算最优线性估计的谱特征和均方误差的显式公式
  3. 发展了鲁棒估计方法:提出了minimax-robust方法处理谱密度不确定性问题
  4. 确定了最不利谱密度:针对三类重要的可容许谱密度集合(D₀, D_v^u, D_δ),给出了最不利谱密度的具体形式

方法详解

任务定义

输入:随机过程ξ(t)在t<0时的观测值,其中ξ(t)具有平稳n阶增量 输出:线性泛函Aξ=0a(t)ξ(t)dtA\xi=\int_0^{\infty}a(t)\xi(t)dtATξ=0Ta(t)ξ(t)dtA_T\xi=\int_0^T a(t)\xi(t)dt的最优线性估计 目标:最小化均方误差E|Aξ - Âξ|²

理论基础

平稳增量过程的定义

随机过程ξ(t)的n阶增量定义为: ξ(n)(t,τ)=(1Bτ)nξ(t)=l=0n(1)lCnlξ(tlτ)\xi^{(n)}(t,\tau) = (1-B_\tau)^n\xi(t) = \sum_{l=0}^n (-1)^l C_n^l \xi(t-l\tau)

其中B_τ是步长为τ的后移算子。

谱表示

平稳n阶增量过程的谱表示为: ξ(n)(t,τ)=eitλ(1eiλτ)n(iλ)n(1+iλ)ndZ(λ)\xi^{(n)}(t,\tau) = \int_{-\infty}^{\infty} e^{it\lambda} \frac{(1-e^{-i\lambda\tau})^n}{(i\lambda)^n}(1+i\lambda)^n dZ(\lambda)

核心算法框架

1. Hilbert空间投影方法

利用引理1将泛函Aξ分解为: Aξ=BξVξA\xi = B\xi - V\xi 其中:

  • Bξ=0bτ(t)ξ(n)(t,τ)dtB\xi = \int_0^{\infty} b_\tau(t)\xi^{(n)}(t,\tau)dt(未知部分)
  • Vξ=τn0vτ(t)ξ(t)dtV\xi = \int_{-\tau n}^0 v_\tau(t)\xi(t)dt(已知部分)

2. 最优估计的谱特征

在谱密度已知情况下,最优估计B̂ξ的谱特征为: hτ(λ)=Bτ(λ)rτ(λ)Φτ1(λ)h_\tau(\lambda) = B_\tau(\lambda) - r_\tau(\lambda)\Phi_\tau^{-1}(\lambda)

其中:

  • Bτ(λ)=0bτ(t)eiλtdtB_\tau(\lambda) = \int_0^{\infty} b_\tau(t)e^{i\lambda t}dt
  • rτ(λ)=0eiλt(Bτφτ)(t)dtr_\tau(\lambda) = \int_0^{\infty} e^{i\lambda t}(B_\tau\varphi_\tau)(t)dt

3. 均方误差计算

Δ(f,A^ξ)=12πrτ(λ)2dλ=Bτφτ2\Delta(f,\hat{A}\xi) = \frac{1}{2\pi}\int_{-\infty}^{\infty} |r_\tau(\lambda)|^2 d\lambda = ||B_\tau\varphi_\tau||^2

鲁棒估计方法

Minimax准则

寻找同时最小化所有可容许谱密度上最大均方误差的估计: minhHDmaxfDΔ(h;f)\min_{h \in H_D} \max_{f \in D} \Delta(h;f)

最不利谱密度的确定

通过解决条件极值问题: DτAWτφ2max,f(λ)=0φ(t)eiλtdt2D||D_\tau AW_\tau \varphi||^2 \to \max, \quad f(\lambda) = \left|\int_0^{\infty} \varphi(t)e^{-i\lambda t}dt\right|^2 \in D

实验设置

理论验证

本文主要是理论研究,通过严格的数学推导验证了方法的正确性,包括:

  1. 定理证明:12个定理和引理的完整证明
  2. 公式推导:从基本的谱表示到最终的估计公式的完整推导过程
  3. 特殊情况分析:针对不同的可容许谱密度类别进行了详细分析

可容许谱密度类别

研究了三类重要的谱密度集合:

  1. D₀类D0={f(λ)12πf(λ)dλP0}D_0 = \{f(\lambda)| \frac{1}{2\pi}\int_{-\infty}^{\infty} f(\lambda)d\lambda \leq P_0\}
  2. D_v^u类Dvu={f(λ)v(λ)f(λ)u(λ),f(λ)dλ=2πP0}D_v^u = \{f(\lambda)|v(\lambda) \leq f(\lambda) \leq u(\lambda), \int_{-\infty}^{\infty} f(\lambda)d\lambda = 2\pi P_0\}
  3. D_δ类Dδ={f(λ)12πf(λ)v(λ)dλδ}D_\delta = \{f(\lambda)| \frac{1}{2\pi}\int_{-\infty}^{\infty} |f(\lambda)-v(\lambda)|d\lambda \leq \delta\}

实验结果

主要理论结果

定理4-6:最优估计公式

  • 给出了泛函Aξ和A_Tξ的最优线性估计的显式表达式
  • 提供了谱特征和均方误差的计算公式
  • 证明了估计的最优性

定理7-12:最不利谱密度

对于三类可容许谱密度集合,分别给出了:

  • 最不利谱密度的具体形式
  • 存在性条件
  • Minimax-robust谱特征的计算方法

关键发现

  1. 分解技巧的有效性:将原问题分解为已知部分和未知部分,显著简化了求解过程
  2. 鞍点性质:最不利谱密度和minimax-robust谱特征构成鞍点,满足鞍点不等式
  3. 算子方程的作用:通过求解特征值问题确定最不利谱密度

相关工作

历史发展

  1. 经典理论:Kolmogorov、Wiener建立了平稳过程的外推理论基础
  2. 增量过程理论:Yaglom将理论扩展到具有平稳增量的过程
  3. 鲁棒方法:Grenander首次提出minimax外推问题

本文贡献与现有工作的关系

  1. 理论扩展:从平稳过程扩展到具有平稳n阶增量的过程
  2. 方法创新:结合Hilbert空间投影方法和minimax理论
  3. 应用拓展:处理更一般的线性泛函估计问题

结论与讨论

主要结论

  1. 建立了具有平稳增量随机过程线性泛函外推的完整理论框架
  2. 在谱确定和谱不确定两种情况下都给出了最优解
  3. 证明了minimax-robust方法的有效性和实用性

理论意义

  1. 数学严谨性:所有结果都有严格的数学证明
  2. 一般性:涵盖了多种重要的谱密度不确定性情况
  3. 完整性:从理论基础到具体应用的完整体系

局限性

  1. 计算复杂性:某些情况下需要求解复杂的算子方程
  2. 实际应用:缺乏具体的数值实例和仿真验证
  3. 假设条件:需要满足一定的正则性条件

未来方向

  1. 数值方法:开发高效的数值算法求解算子方程
  2. 应用研究:在具体领域(如金融、信号处理)中的应用
  3. 扩展研究:向多维过程和非线性情况扩展

深度评价

优点

  1. 理论深度:数学理论严谨,推导完整详细
  2. 方法创新:巧妙结合了多种数学工具和理论
  3. 实用价值:解决了实际中谱密度不确定的重要问题
  4. 系统性强:从基础理论到具体应用形成完整体系

技术亮点

  1. 分解策略:将复杂问题分解为可处理的子问题
  2. 算子理论应用:熟练运用Hilbert空间和算子理论
  3. 优化方法:有效结合了变分法和凸优化理论

不足之处

  1. 缺乏数值验证:理论结果需要数值实例支持
  2. 计算可行性:某些公式的实际计算可能较为困难
  3. 应用指导:缺乏具体应用场景的详细分析

影响力评估

  1. 理论贡献:为随机过程理论提供了重要的理论工具
  2. 方法论价值:minimax-robust方法具有广泛的适用性
  3. 后续研究:为相关领域的进一步研究奠定了基础

适用场景

  1. 时间序列分析:具有趋势或季节性的时间序列预测
  2. 信号处理:在噪声环境下的信号外推和滤波
  3. 金融工程:金融时间序列的风险管理和预测
  4. 工程应用:控制系统中的状态估计和预测

参考文献

论文引用了27篇重要文献,涵盖了随机过程理论、minimax方法、谱分析等多个领域的经典和前沿工作,体现了研究的深度和广度。


总体评价:这是一篇理论深度很高的数学统计学论文,在随机过程外推理论方面做出了重要贡献。虽然偏重理论推导,但解决了实际中的重要问题,具有很好的理论价值和潜在应用前景。