2025-11-12T06:37:10.076735

A Generalized Notion of Completeness and Its Application

Singh, Sahoo, Hazra

From the perspective of data reduction, the notions of minimal sufficient and complete statistics together play an important role in determining optimal statistics (estimators). The classical notion of sufficiency and completeness are not adequate in many robust estimations that are based on different divergences. Recently, the notion of generalized sufficiency based on a generalized likelihood function was introduced in the literature. It is important to note that the concept of sufficiency alone does not necessarily produce optimal statistics (estimators). Thus, in line with the generalized sufficiency, we introduce a generalized notion of completeness with respect to a generalized likelihood function. We then characterize the family of probability distributions that possesses completeness with respect to the generalized likelihood function associated with the density power divergence (DPD). Moreover, we show that the family of distributions associated with the logarithmic density power divergence (LDPD) is not complete. Further, we extend the Lehmann-ScheffÃ© theorem and the Basu's theorem for the generalized likelihood estimation. Subsequently, we obtain the generalized uniformly minimum variance unbiased estimator (UMVUE) for the $\mathcal{B^{(Î±)}}$-family. Further, we derive an formula of the asymptotic expected deficiency (AED) that is used to compare the performance between the minimum density power divergence estimator (MDPDE) and the generalized UMVUE for $\mathcal{B^{(Î±)}}$-family. Finally, we provide an application of the developed results in stress-strength reliability model.

academic

A Generalized Notion of Completeness and Its Application

基本信息

论文ID: 2510.13174
标题: A Generalized Notion of Completeness and Its Application
作者: Himanshi Singh (IIT Jodhpur), Tanmay Sahoo (IIT Palakkad), Nil Kamal Hazra (IIT Jodhpur)
分类: math.ST stat.TH (Statistics Theory)
提交时间: 2025年10月15日
论文链接: https://arxiv.org/abs/2510.13174

摘要

从数据约简的角度来看，最小充分统计量和完备统计量的概念在确定最优统计量（估计量）方面起着重要作用。经典的充分性和完备性概念在基于不同散度的鲁棒估计中并不适用。最近，文献中引入了基于广义似然函数的广义充分性概念。需要注意的是，仅有充分性概念并不一定能产生最优统计量。因此，与广义充分性相一致，本文引入了关于广义似然函数的广义完备性概念，并刻画了在密度幂散度(DPD)相关的广义似然函数下具有完备性的概率分布族。此外，证明了与对数密度幂散度(LDPD)相关的分布族不具有完备性，扩展了Lehmann-Scheffé定理和Basu定理到广义似然估计，并获得了B(α)族的广义一致最小方差无偏估计量(UMVUE)。

研究背景与动机

问题背景

数据约简的重要性: 在统计推断中，当样本量很大时，直接解释样本数据变得困难，需要通过统计量进行数据约简。理想的数据约简应该满足两个关键性质：(i)不丢失关于参数的重要信息；(ii)舍弃与参数无关的冗余信息。
经典理论的局限性: Fisher引入的充分统计量概念基于经典似然函数，在最大似然估计框架下工作良好。然而，在鲁棒推断等实际应用中，需要超越基于似然的方法，此时经典的充分性和完备性概念不再适用。
广义框架的需求: 近年来发展的基于散度的估计方法（如MDPDE、MLDPDE等）使用广义似然函数，需要相应的广义充分性和完备性理论支持。

研究动机

充分性概念单独不能产生最优统计量，需要结合完备性概念才能获得UMVUE
现有的完备性定义在广义似然估计框架下不再适用
需要建立与广义充分性相匹配的广义完备性理论

核心贡献

引入广义完备性和辅助性概念: 基于广义似然函数定义了广义完备统计量和广义辅助统计量的概念
刻画B(α)族的完备性: 证明了B(α)族在DPD相关的广义似然函数下具有广义完备性
证明M(α)族的不完备性: 通过反例证明了M(α)族在LDPD相关的广义似然函数下不具有完备性
扩展经典定理: 将Lehmann-Scheffé定理和Basu定理扩展到广义似然估计框架
获得广义UMVUE: 为B(α)族导出了广义一致最小方差无偏估计量
渐近期望亏损分析: 推导出MDPDE相对于广义UMVUE的渐近期望亏损(AED)公式
应用示例: 在应力-强度可靠性模型中展示了理论结果的应用

方法详解

任务定义

本文的核心任务是在广义似然估计框架下建立完备性理论，具体包括：

输入：概率分布族P = {fλ : λ ∈ Λ}和广义似然函数LG
输出：广义完备统计量的判定准则和构造方法
约束：广义似然函数需满足特定的正则性条件

核心概念与定义

1. 广义完备统计量

定义3.2: 设P = {fλ : λ ∈ Λ}是概率分布族，LG是广义似然函数。统计量T称为P的广义完备统计量，如果对任意函数h，

$\tilde{E}_λ[h(T)] = \int h(T(y_1^n)) \frac{\exp[L_G(y_1^n;λ)]}{\int \exp[L_G(r_1^n;λ)]dr_1^n} dy_1^n = 0, \forall λ ∈ Λ$

蕴含

$\tilde{P}_λ\{h(T) = 0\} = 1, \forall λ ∈ Λ$

2. 形变概率分布

定义2.3: 与广义似然函数LG相关的形变概率分布为：

$\tilde{f}_λ(y_1^n) = \frac{\exp[L_G(y_1^n;λ)]}{\int \exp[L_G(r_1^n;λ)]dr_1^n}$

3. B(α)族和M(α)族

B(α)族（定义2.8）： $f_λ(y) = [h(y) + Z(λ) + w(λ)^T f(y)]^{\frac{1}{α-1}}$

M(α)族（定义2.9）： $f_λ(y) = N(λ)[h(y) + w(λ)^T f(y)]^{\frac{1}{α-1}}$

主要定理

广义Lehmann-Scheffé定理

定理3.1: 设T是P的广义完备充分统计量，则每个广义可估函数τ̃(λ)有且仅有一个形如h(T)的广义无偏估计量，且h(T)是τ̃(λ)的唯一广义UMVUE。

广义Basu定理

定理3.3: 设T是P的广义完备充分统计量，则任何广义辅助统计量A与T独立。

B(α)族的完备性

定理4.2: 对于B(α)族，如果w(λ)的值域包含d维矩形，则 $\bar{f}_d = [\bar{f}_1, ..., \bar{f}_d]^T$ 是广义完备充分统计量，其中 $\bar{f}_i = \frac{1}{n}\sum_{j=1}^n f_i(y_j)$ 。

实验设置

理论验证

论文主要通过理论分析和数学证明验证结果，包括：

B(α)族完备性证明: 通过构造形变概率分布并应用Lehmann的经典结果
M(α)族非完备性证明: 通过Bernoulli分布的反例
AED公式推导: 基于Taylor展开和渐近分析

应用案例

应力-强度可靠性模型:

强度Y和应力X均服从Student分布
可靠性参数： $R = P(Y > X) = Φ(\frac{μ}{\sqrt{2}σ^*})$
比较MDPDE和广义UMVUE的性能

实验结果

主要理论结果

B(α)族的完备性: 证明了在适当条件下， $\bar{f}_d$ 是B(α)族的广义完备充分统计量
M(α)族的非完备性: 通过Bernoulli分布的具体例子证明了M(α)族不具有广义完备性
AED公式: 对于B(α)族，MDPDE相对于广义UMVUE的AED为：

$AED[\tilde{τ}(T), \tilde{U}(T)] = \frac{1}{\frac{d}{dλ}w^*(λ)}\left[\frac{\frac{d^3}{dλ^3}\tilde{τ}(λ)}{\frac{d}{dλ}\tilde{τ}(λ)} + \frac{1}{4}\left(\frac{\frac{d^2}{dλ^2}\tilde{τ}(λ)}{\frac{d}{dλ}\tilde{τ}(λ)}\right)^2 - \frac{\frac{d^2}{dλ^2}w^*(λ)}{(\frac{d}{dλ}w^*(λ))^2}\frac{\frac{d^2}{dλ^2}\tilde{τ}(λ)}{\frac{d}{dλ}\tilde{τ}(λ)}\right]$