Many scientific analyses require simultaneous comparison of multiple functionals of an unknown signal at once, calling for multidimensional confidence regions with guaranteed simultaneous frequentist under structural constraints (e.g., non-negativity, shape, or physics-based). This paper unifies and extends many previous optimization-based approaches to constrained confidence region construction in linear inverse problems through the lens of statistical test inversion. We begin by reviewing the historical development of optimization-based confidence intervals for the single-functional setting, from "strict bounds" to the Burrus conjecture and its recent refutation via the aforementioned test inversion framework. We then extend this framework to the multiple-functional setting. This framework can be used to: (i) improve the calibration constants of previous methods, yielding smaller confidence regions that still preserve frequentist coverage, (ii) obtain tractable multidimensional confidence regions that need not be hyper-rectangles to better capture functional dependence structure, and (iii) generalize beyond Gaussian error distributions to generic log-concave error distributions. We provide theory establishing nominal simultaneous coverage of our methods and show quantitative volume improvements relative to prior approaches using numerical experiments.
- ID Articolo: 2510.11708
- Titolo: Simultaneous Frequentist Calibration of Confidence Regions for Multiple Functionals in Constrained Inverse Problems
- Autori: Pau Batlle, Pratik Patil, Michael Stanley, Javier Ruiz Lupon, Houman Owhadi, Mikael Kuusela
- Classificazione: math.ST stat.TH
- Data di Pubblicazione: 13 ottobre 2025
- Link Articolo: https://arxiv.org/abs/2510.11708
Molte analisi scientifiche richiedono il confronto simultaneo di molteplici funzionali di un segnale sconosciuto, il che necessita la costruzione di regioni di confidenza multidimensionali con copertura frequentista simultanea garantita sotto vincoli strutturali (quali non-negatività, vincoli di forma o vincoli basati su principi fisici). Questo articolo unifica e estende i metodi di costruzione di regioni di confidenza basati su ottimizzazione nei problemi inversi lineari vincolati attraverso la prospettiva dell'inversione di test statistici. L'articolo inizialmente esamina lo sviluppo storico degli intervalli di confidenza basati su ottimizzazione nel contesto di funzionali singoli, dai "limiti rigorosi simultanei" alla congettura di Burrus e alla sua recente confutazione attraverso il framework di inversione di test. Successivamente estende questo framework al contesto di funzionali multipli. Il framework può essere utilizzato per: (i) migliorare le costanti di calibrazione dei metodi precedenti, producendo regioni di confidenza più piccole mantenendo comunque la copertura frequentista; (ii) ottenere regioni di confidenza multidimensionali trattabili che non necessariamente sono iper-rettangolari, per catturare meglio la struttura di dipendenza tra funzionali; (iii) generalizzare da distribuzioni di errore gaussiane a distribuzioni di errore log-concave generali.
L'articolo affronta il problema della costruzione di regioni di confidenza simultanee per molteplici funzionali nei problemi inversi lineari. Si consideri il problema inverso lineare:
y=Kx∗+ε
dove y∈Rn sono le osservazioni, x∗∈Rp è il parametro sconosciuto, K∈Rn×p è l'operatore forward noto, e ε∈Rn è il rumore casuale.
- Esigenze Scientifiche: Molte analisi scientifiche richiedono l'inferenza simultanea di molteplici funzionali lineari Hx∗ del segnale sconosciuto, piuttosto che la stima dell'intero parametro ad alta dimensione x∗
- Informazioni Vincolate: Il parametro reale x∗ tipicamente soddisfa vincoli basati sulla conoscenza fisica a priori (quali non-negatività x∗≥0)
- Copertura Simultanea: È necessario garantire la copertura frequentista simultanea per tutti i funzionali, non solo la copertura marginale
- Conservatività: I metodi tradizionali dei limiti rigorosi simultanei (SSB) sono eccessivamente conservativi, costruendo prima un insieme di confidenza per x∗ e poi mappandolo nello spazio dei funzionali
- Restrizione Rettangolare: I metodi esistenti tipicamente producono regioni di confidenza iper-rettangolari, incapaci di catturare la struttura di dipendenza tra funzionali
- Problemi di Calibrazione: Storicamente, metodi come la congettura di Burrus mancavano di garanzie teoriche rigorose
- Framework Unificato: Unifica i metodi di costruzione di regioni di confidenza vincolate per funzionali singoli e multipli attraverso la prospettiva dell'inversione di test
- Progressi Teorici:
- Dimostra la convessità delle funzioni dei quantili corrispondenti alle statistiche di test λu2 e λ1
- Determina la posizione della soluzione ottimale dei problemi di ottimizzazione dei quantili
- Stabilisce relazioni di dominanza stocastica tra statistiche di test
- Algoritmi Pratici:
- Fornisce costanti di calibrazione ottimali per problemi con vincoli di non-negatività
- Sviluppa il metodo di riduzione TFM per problemi ad alta dimensione
- Propone tecniche di separazione spazio riga/spazio nullo
- Miglioramenti di Prestazione: Riduce significativamente il volume delle regioni di confidenza rispetto ai metodi classici, mantenendo il tasso di copertura nominale
Data la matrice H∈Rk×p, l'obiettivo è costruire un insieme di confidenza frequentista finito-campionario 1−α Rα(y)⊆Rk per il vettore sconosciuto Hx∗∈Rk, tale che:
Py∼Px(Hx∈Rα(y))≥1−α
per tutti x∈X (insieme vincolato).
Per ogni μ∈R, si consideri il test di ipotesi:
H0:x∗∈Φμ∩XvsH1:x∗∈X∖Φμ
dove Φμ={x∈Rp:hTx=μ}.
Per μ∈Rk, si definisca Φμ={x∈Rp:Hx=μ}, il test di ipotesi diventa:
H0:x∗∈Φμ∩XvsH1:x∗∈X∖Φμ
L'articolo analizza tre statistiche di test:
- Termine Vincolato Secondo λc2(μ,y):
λc2(μ,y)=minHx=μ,Ax≤b∥Kx−y∥22−minAx≤b∥Kx−y∥22
- Termine Non-Vincolato Secondo λu2(μ,y):
λu2(μ,y)=minHx=μ,Ax≤b∥Kx−y∥22−minx∈Rp∥Kx−y∥22
- Termine Singolo λ1(μ,y):
λ1(μ,y)=minHx=μ,Ax≤b∥Kx−y∥22
Per ogni statistica di test, è necessario determinare una soglia per garantire il tasso di copertura 1−α:
- Soglia Stratificata: d∗(μ)=supHx=μ,Ax≤bQx,1−α
- Soglia Globale: D∗=supAx≤bQx,1−α
dove Qx,1−α è il quantile (1−α) di Zx=λ(Hx,Kx+ε).
Teorema 5.4: Per ogni 0<α<1 fissato, la funzione dei quantili Qu2(x) è convessa in x.
Teorema 5.6 (Vincoli Lineari): Sotto vincoli lineari Ax∗≤b,
supx∈PQu2(x)=maxi=1:mQu2(pi)
dove {pi}i=1m è l'insieme dei vertici del poliedro P.
Teorema 5.7 (Vincoli Conici): Sotto vincoli conici x∗∈C,
supx∈CQu2(x)=Qu2(0)
Si consideri il problema con vincolo di non-negatività:
y=Kx+ε,ε∼N(0,I),x∗≥0
dove:
K=(201111),H=(10−110−1)
- SSB_x: Descrizione del limite della scatola di confine SSB nello spazio x
- SSB_μ: Descrizione SSB nello spazio μ
- QuantileZero_x/μ: Versione migliorata utilizzando costanti ottimali
- Bonferroni: Intervalli di prodotto con correzione di Bonferroni
- Metodo Split: Tecnica di separazione spazio riga/spazio nullo
- Tasso di Copertura Empirico: Verificato attraverso N=105 ricampionamenti
- Area della Regione: Calcolata utilizzando integrazione in coordinate polari
Per y=(0,0) e y=(20,10), il metodo di descrizione μ produce insiemi convessi strettamente contenuti nei limiti della scatola di confine x, riducendo significativamente l'area della regione.
- x∗=(0,0,0): Il metodo QuantileZero_μ raggiunge un tasso di copertura approssimativamente preciso del 68%, con area media minima
- x∗=(5,5,5): Tutti i metodi raggiungono la copertura, ma il metodo di descrizione μ mantiene comunque vantaggi significativi in termini di area
- Miglioramento delle Costanti di Calibrazione: Per i livelli di confidenza del 68% e 95%, le costanti ottimali sono rispettivamente 1,644 e 5,139, con miglioramenti significativi rispetto ai valori 2,279 e 5,991 della distribuzione χ22
- Riduzione dell'Area: La descrizione μ riduce l'area media di circa il 30-50% rispetto ai limiti della scatola di confine x
- Burrus (1964): Primo a proporre il metodo di ottimizzazione per intervalli di confidenza vincolati
- Rust & O'Leary (1986): Sviluppo di algoritmi pratici
- Stark (1992): Proposta del metodo dei limiti rigorosi
- Tenorio et al. (2007): Sviluppo della tecnica di riduzione TFM
- Batlle et al. (2023): Confutazione della congettura di Burrus attraverso il framework di inversione di test
- Letteratura sull'Inferenza Vincolata: Connessioni con la teoria della distribuzione χ2-bar
- Predizione Conforme: Distinzioni negli obiettivi e nelle ipotesi
- Contributi Teorici: Stabilisce un framework unificato di inversione di test per regioni di confidenza vincolate con funzionali multipli
- Vantaggi Computazionali: Fornisce algoritmi scalabili per problemi ad alta dimensione
- Miglioramenti di Prestazione: Riduce significativamente il volume delle regioni di confidenza rispetto ai metodi classici
- Statistica λc2: La funzione dei quantili manca di convessità, il problema di massimizzazione rimane aperto
- Complessità Computazionale: La ricerca dei vertici in casi ad alta dimensione potrebbe essere difficile
- Soglia Stratificata: Il calcolo della funzione completa d∗(μ) è tipicamente impegnativo
- Estensione Non-Gaussiana: Estensione a distribuzioni log-concave generali
- Calibrazione di λc2: Sviluppo di algoritmi di calibrazione per la statistica del termine vincolato secondo
- Teoria Asintotica: Studio delle proprietà in grandi campioni
- Campi di Applicazione: Estensione a vincoli di forma e altri problemi statistici
- Rigore Teorico: Fornisce un framework matematico completo, incluse prove di convessità e risultati di ottimalità
- Valore Pratico: Sviluppa algoritmi scalabili che risolvono problemi pratici ad alta dimensione
- Prospettiva Unificata: Unifica metodi storicamente dispersi sotto il framework di inversione di test
- Miglioramenti Significativi: Riduce sostanzialmente le regioni di confidenza mantenendo garanzie teoriche
- Lacune Teoriche: La teoria completa per la statistica λc2 rimane ancora da stabilire
- Limitazioni Computazionali: Complessità computazionale in alcuni casi ad alta dimensione
- Portata Sperimentale: Gli esperimenti numerici sono relativamente semplici, mancano applicazioni pratiche complesse
- Contributi Accademici: Fornisce nuove basi teoriche per la quantificazione dell'incertezza nei problemi inversi vincolati
- Applicazioni Pratiche: Prospettive di applicazione diffusa in scienze fisiche, ingegneria e altri campi che richiedono inferenza vincolata
- Significato Metodologico: Il framework di inversione di test potrebbe ispirare soluzioni per altri problemi statistici
- Inferenza simultanea di funzionali multipli nei problemi inversi lineari
- Stima di parametri con vincoli fisici
- Calcolo scientifico che richiede garanzie frequentiste rigorose
- Quantificazione dell'incertezza in problemi di ottimizzazione vincolata ad alta dimensione
L'articolo cita 47 riferimenti correlati, coprendo lavori importanti in inferenza vincolata, problemi inversi, teoria dell'ottimizzazione e statistica, fornendo una base teorica solida per la ricerca.