We obtain a non-asymptotic bound for the expected injective norm of a random tensor with independent entries. This bound is similar to the bound by Bandeira and van Handel (2016) for the expected spectral norm of a random matrix with independent entries.
पेपर ID : 2412.21193शीर्षक : स्वतंत्र प्रविष्टियों वाले यादृच्छिक टेंसर का इंजेक्टिव नॉर्मलेखक : March T. Boedihardjo (मिशिगन स्टेट विश्वविद्यालय)वर्गीकरण : math.PR (प्रायिकता सिद्धांत)प्रकाशन समय : 2 जनवरी 2025 (arXiv v2)पेपर लिंक : https://arxiv.org/abs/2412.21193 यह पेपर स्वतंत्र प्रविष्टियों वाले यादृच्छिक टेंसर के अपेक्षित इंजेक्टिव नॉर्म के लिए गैर-अनंतस्पर्शी सीमाएं प्राप्त करता है। यह सीमा Bandeira और van Handel (2016) द्वारा स्वतंत्र प्रविष्टियों वाले यादृच्छिक मैट्रिक्स के अपेक्षित वर्णक्रमीय नॉर्म के लिए प्राप्त सीमा के समान है।
मूल समस्या : उच्च-क्रम यादृच्छिक टेंसर के इंजेक्टिव नॉर्म के लिए गैर-अनंतस्पर्शी प्रायिकता सीमाएं स्थापित करना, जो यादृच्छिक मैट्रिक्स के वर्णक्रमीय नॉर्म सीमा का प्राकृतिक विस्तार हैमहत्व : इंजेक्टिव नॉर्म टेंसर विश्लेषण में एक मौलिक अवधारणा है, जब टेंसर क्रम r=2 हो तो यह मैट्रिक्स के वर्णक्रमीय नॉर्म में परिणत होता है, और उच्च-आयामी यादृच्छिक संरचनाओं को समझने के लिए महत्वपूर्ण हैवर्तमान सीमाएं :
Bandeira-van Handel (2016) का शास्त्रीय परिणाम केवल मैट्रिक्स (r=2) स्थिति पर लागू होता है मौजूदा टेंसर सीमाएं या तो स्थिरांक कारक पर्याप्त सटीक नहीं हैं, या अनावश्यक लॉगरिदमिक कारक शामिल करती हैं मैट्रिक्स स्थिति के प्रमाण तकनीकें (आघूर्ण विधि, वर्णक्रमीय अपघटन) सीधे टेंसर तक विस्तारित करना कठिन है लेखक का उद्देश्य मैट्रिक्स स्थिति की सटीक सीमाओं को सामान्य टेंसर तक विस्तारित करना है, हालांकि स्थिरांक कारकों और लॉगरिदमिक पदों में कुछ समझौता है, लेकिन मुख्य पद की इष्टतम संरचना को बनाए रखता है।
मुख्य प्रमेय : r-क्रम यादृच्छिक टेंसर के इंजेक्टिव नॉर्म के लिए गैर-अनंतस्पर्शी ऊपरी सीमा स्थापित करना, जो मुख्य पद और लॉगरिदमिक सुधार पद के रूप में हैतकनीकी नवाचार : ज्यामितीय कार्यात्मक विश्लेषण पर आधारित प्रमाण ढांचा विकसित करना, जो टेंसर स्थिति में कठिन वर्णक्रमीय अपघटन से बचता हैसामान्यीकृत परिणाम : सीमा को परिबद्ध स्वतंत्र यादृच्छिक चर और Bernoulli यादृच्छिक चर स्थिति तक विस्तारित करनासांद्रता असमानताएं : संबंधित प्रायिकता सांद्रता सीमाएं प्रदान करनाr-क्रम टेंसर स्पेस ( R d ) ⊗ r (R^d)^{\otimes r} ( R d ) ⊗ r पर यादृच्छिक टेंसर पर विचार करें:
Z = ∑ i 1 , … , i r ∈ [ d ] b i 1 , … , i r g i 1 , … , i r e i 1 ⊗ ⋯ ⊗ e i r Z = \sum_{i_1,\ldots,i_r \in [d]} b_{i_1,\ldots,i_r} g_{i_1,\ldots,i_r} e_{i_1} \otimes \cdots \otimes e_{i_r} Z = ∑ i 1 , … , i r ∈ [ d ] b i 1 , … , i r g i 1 , … , i r e i 1 ⊗ ⋯ ⊗ e i r
जहां g i 1 , … , i r g_{i_1,\ldots,i_r} g i 1 , … , i r स्वतंत्र मानक गॉसियन यादृच्छिक चर हैं, b i 1 , … , i r ∈ R b_{i_1,\ldots,i_r} \in \mathbb{R} b i 1 , … , i r ∈ R निश्चित गुणांक हैं।
इंजेक्टिव नॉर्म को परिभाषित किया गया है:
∥ Z ∥ i n j : = sup x 1 , … , x r ∈ B 2 d ⟨ Z , x 1 ⊗ ⋯ ⊗ x r ⟩ \|Z\|_{inj} := \sup_{x_1,\ldots,x_r \in B_2^d} \langle Z, x_1 \otimes \cdots \otimes x_r \rangle ∥ Z ∥ inj := sup x 1 , … , x r ∈ B 2 d ⟨ Z , x 1 ⊗ ⋯ ⊗ x r ⟩
लेखक तीन मुख्य तकनीकी वस्तुओं का निर्माण करते हैं:
बहु-रैखिक मानचित्र τ :
τ ( x 1 , … , x r ) : = ( b i 1 , … , i r ⟨ x 1 , e i 1 ⟩ ⋯ ⟨ x r , e i r ⟩ ) i 1 , … , i r ∈ [ d ] \tau(x_1,\ldots,x_r) := (b_{i_1,\ldots,i_r}\langle x_1, e_{i_1}\rangle \cdots \langle x_r, e_{i_r}\rangle)_{i_1,\ldots,i_r \in [d]} τ ( x 1 , … , x r ) := ( b i 1 , … , i r ⟨ x 1 , e i 1 ⟩ ⋯ ⟨ x r , e i r ⟩ ) i 1 , … , i r ∈ [ d ]
विकर्ण मैट्रिक्स D ( k ) D^{(k)} D ( k ) :
( D x 1 , … , x k − 1 , x k + 1 , … , x r ( k ) ) i k , i k : = ( ∑ i 1 , … , i k − 1 , i k + 1 , … , i r b i 1 , … , i r 2 ∏ j ≠ k ⟨ x j , e i j ⟩ 2 ) 1 / 2 (D^{(k)}_{x_1,\ldots,x_{k-1},x_{k+1},\ldots,x_r})_{i_k,i_k} := \left(\sum_{i_1,\ldots,i_{k-1},i_{k+1},\ldots,i_r} b_{i_1,\ldots,i_r}^2 \prod_{j \neq k} \langle x_j, e_{i_j}\rangle^2\right)^{1/2} ( D x 1 , … , x k − 1 , x k + 1 , … , x r ( k ) ) i k , i k := ( ∑ i 1 , … , i k − 1 , i k + 1 , … , i r b i 1 , … , i r 2 ∏ j = k ⟨ x j , e i j ⟩ 2 ) 1/2
मेट्रिक η ( k ) \eta^{(k)} η ( k ) :
η ( k ) ( x , y ) : = ∥ ψ k ( x ) − ψ k ( y ) ∥ ∞ \eta^{(k)}(x,y) := \|\psi_k(x) - \psi_k(y)\|_\infty η ( k ) ( x , y ) := ∥ ψ k ( x ) − ψ k ( y ) ∥ ∞
लेम्मा 2.1 : τ और मेट्रिक η के बीच संबंध स्थापित करनालेम्मा 2.2 : विकर्ण मैट्रिक्स D और मेट्रिक η के बीच संबंध स्थापित करनालेम्मा 2.6 : मेट्रिक η के कवरिंग नंबर और Dudley इंटीग्रल को नियंत्रित करनालेखक Slepian-Fernique असमानता का एक संस्करण विकसित करते हैं जो दूसरे मेट्रिक पद की अनुमति देता है:
लेम्मा 3.4 : यदि गॉसियन प्रक्रियाएं ( Z t ) (Z_t) ( Z t ) और ( W t ) (W_t) ( W t ) संतुष्ट करती हैं
E ( Z t − Z s ) 2 ≤ E ( W t − W s ) 2 + ρ ( t , s ) 2 E(Z_t - Z_s)^2 \leq E(W_t - W_s)^2 + \rho(t,s)^2 E ( Z t − Z s ) 2 ≤ E ( W t − W s ) 2 + ρ ( t , s ) 2
तो
E sup t Z t ≤ E sup t W t + C ∫ 0 ∞ ln N ( T , ρ , ε ) d ε E\sup_t Z_t \leq E\sup_t W_t + C\int_0^\infty \sqrt{\ln N(T,\rho,\varepsilon)} d\varepsilon E sup t Z t ≤ E sup t W t + C ∫ 0 ∞ ln N ( T , ρ , ε ) d ε
वर्णक्रमीय अपघटन से बचना : ज्यामितीय कार्यात्मक विश्लेषण विधि के माध्यम से टेंसर स्थिति में कठिन वर्णक्रमीय अपघटन से बचनामेट्रिक अपघटन : प्रेरित मेट्रिक को नियंत्रणीय गॉसियन प्रक्रिया भाग और ज्यामितीय मेट्रिक भाग में अपघटित करनाकवरिंग नंबर नियंत्रण : Maurey अनुभवजन्य विधि के माध्यम से जटिल मेट्रिक के कवरिंग नंबर को नियंत्रित करनाउपरोक्त यादृच्छिक टेंसर Z के लिए, हमारे पास है
E ∥ Z ∥ i n j ≤ 2 r ∑ k ∈ [ r ] max i 1 , … , i k − 1 , i k + 1 , … , i r ( ∑ i k b i 1 , … , i r 2 ) 1 / 2 + C r 3 ( ln d ) 2 max ∣ b i 1 , … , i r ∣ E\|Z\|_{inj} \leq \sqrt{2r}\sum_{k \in [r]} \max_{i_1,\ldots,i_{k-1},i_{k+1},\ldots,i_r} \left(\sum_{i_k} b_{i_1,\ldots,i_r}^2\right)^{1/2} + Cr^3(\ln d)^2 \max |b_{i_1,\ldots,i_r}| E ∥ Z ∥ inj ≤ 2 r ∑ k ∈ [ r ] max i 1 , … , i k − 1 , i k + 1 , … , i r ( ∑ i k b i 1 , … , i r 2 ) 1/2 + C r 3 ( ln d ) 2 max ∣ b i 1 , … , i r ∣
( E ∥ Z ∥ i n j 2 ) 1 / 2 ≥ max k ∈ [ r ] max i 1 , … , i k − 1 , i k + 1 , … , i r ( ∑ i k b i 1 , … , i r 2 ) 1 / 2 (E\|Z\|_{inj}^2)^{1/2} \geq \max_{k \in [r]} \max_{i_1,\ldots,i_{k-1},i_{k+1},\ldots,i_r} \left(\sum_{i_k} b_{i_1,\ldots,i_r}^2\right)^{1/2} ( E ∥ Z ∥ inj 2 ) 1/2 ≥ max k ∈ [ r ] max i 1 , … , i k − 1 , i k + 1 , … , i r ( ∑ i k b i 1 , … , i r 2 ) 1/2
अनुपरिणाम 1.4 : [ − K , K ] [-K,K] [ − K , K ] में मान लेने वाले स्वतंत्र यादृच्छिक चर के लिए, समान सीमा मान्य है, मुख्य पद गुणांक 4 r 4\sqrt{r} 4 r में बदल जाता है।
अनुपरिणाम 1.5 : Bernoulli यादृच्छिक चर स्थिति के लिए, साहित्य 16 में ( l n d ) r − 2 (ln d)^{r-2} ( l n d ) r − 2 कारक को हटाया गया है।
चरण 1 : समस्या को गॉसियन प्रक्रिया के सर्वोच्च मान में रूपांतरित करनाचरण 2 : तीन तकनीकी वस्तुओं का उपयोग करके प्रेरित मेट्रिक को अपघटित करनाचरण 3 : सामान्यीकृत Slepian-Fernique असमानता लागू करनाचरण 4 : गॉसियन पद और ज्यामितीय पद को अलग से अनुमानित करनागॉसियन पद को सांद्रता असमानता के माध्यम से नियंत्रित किया जाता है ज्यामितीय पद को कवरिंग नंबर के Dudley इंटीग्रल के माध्यम से नियंत्रित किया जाता है कवरिंग नंबर अनुमान Maurey अनुभवजन्य विधि का उपयोग करते हैं Bandeira-van Handel (2016) के साथ तुलना :मुख्य पद संरचना समान है लॉगरिदमिक पद ln d \sqrt{\ln d} ln d से ( ln d ) 2 (\ln d)^2 ( ln d ) 2 में बदल जाता है स्थिरांक कारक में कुछ नुकसान होता है Latała (2005) के साथ तुलना :ℓ 4 \ell^4 ℓ 4 नॉर्म पद से बचा जाता हैअधिक सटीक मुख्य पद प्रदान करता है Zhou-Zhu (2021) के साथ तुलना :( l n d ) r − 2 (ln d)^{r-2} ( l n d ) r − 2 कारक को हटाया गया हैनियंत्रणीय लॉगरिदमिक पद जोड़ा गया है यह पेपर यादृच्छिक मैट्रिक्स के वर्णक्रमीय नॉर्म की सटीक सीमाओं को टेंसर स्थिति तक सफलतापूर्वक विस्तारित करता है, हालांकि तकनीकी विवरणों में कुछ समझौता है, लेकिन मुख्य पद की इष्टतम संरचना को बनाए रखता है।
लॉगरिदमिक पद ln d \sqrt{\ln d} ln d से ( ln d ) 2 (\ln d)^2 ( ln d ) 2 में खराब हो जाता है स्थिरांक कारक पर्याप्त सटीक नहीं हैं प्रमाण तकनीक जटिलता अधिक है लॉगरिदमिक पद की निर्भरता में सुधार करना स्थिरांक कारकों को अनुकूलित करना अधिक प्रत्यक्ष टेंसर वर्णक्रमीय अपघटन तकनीकें विकसित करना सैद्धांतिक महत्व : टेंसर यादृच्छिक विश्लेषण में महत्वपूर्ण रिक्तता को भरता हैतकनीकी नवाचार : टेंसर के लिए लागू नया प्रमाण ढांचा विकसित करता हैपरिणाम सटीकता : मुख्य पद इष्टतम तक पहुंचता है, निचली सीमा मेल खाती हैव्यापक अनुप्रयोग : कई यादृच्छिक चर प्रकारों तक सामान्यीकृत करता हैतकनीकी जटिलता : प्रमाण प्रक्रिया काफी जटिल हैस्थिरांक नुकसान : मैट्रिक्स स्थिति की तुलना में स्थिरांक और लॉगरिदमिक पद नुकसान हैव्यावहारिकता : उच्च-आयामी स्थिति में सीमा पर्याप्त तंग नहीं हो सकती हैयह पेपर टेंसर यादृच्छिक विश्लेषण के लिए मौलिक उपकरण प्रदान करता है, मशीन लर्निंग, सांख्यिकीय भौतिकी आदि क्षेत्रों में टेंसर विधियों के लिए महत्वपूर्ण सैद्धांतिक समर्थन है।
उच्च-आयामी टेंसर डेटा विश्लेषण यादृच्छिक टेंसर नेटवर्क अनुसंधान क्वांटम उलझन ज्यामितीय विश्लेषण मशीन लर्निंग में टेंसर अपघटन Bandeira, A. S. और van Handel, R. (2016). स्वतंत्र प्रविष्टियों वाले यादृच्छिक मैट्रिक्स के नॉर्म पर तीव्र गैर-अनंतस्पर्शी सीमाएं। Latała, R. (2005). यादृच्छिक मैट्रिक्स के नॉर्म के कुछ अनुमान। Zhou, Z. और Zhu, Y. (2021). विरल यादृच्छिक टेंसर: सांद्रता, नियमितकरण और अनुप्रयोग।