2025-11-12T03:25:26.827461

NeuroPINNs: Neuroscience Inspired Physics Informed Neural Networks

Garg, Chakraborty

We introduce NeuroPINNs, a neuroscience-inspired extension of Physics-Informed Neural Networks (PINNs) that incorporates biologically motivated spiking neuron models to achieve energy-efficient PDE solving. Unlike conventional PINNs, which rely on continuously firing activations and therefore incur high computational and energy costs, NeuroPINNs leverage Variable Spiking Neurons (VSNs) to enable sparse, event-driven communication. This makes them particularly well-suited for deployment on neuromorphic hardware and for scenarios with constrained computational resources, such as embedded and edge devices. A central challenge, however, lies in reconciling the discontinuous dynamics of spiking neurons with the smooth residual-based loss formulation required in PINNs. Direct smoothing introduces systematic biases, leading to inaccurate PDE learning. To overcome this, we employ a novel stochastic projection method inspired from upscaled theory that faithfully captures spiking behavior while maintaining compatibility with gradient-based optimization. Standard surrogate backpropagation is used for parameter updates, ensuring computational tractability. We demonstrate the effectiveness of NeuroPINNs on four representative PDE problems across both regular and irregular domains. Furthermore, application of NeuroPINN for linear elastic micromechnics in three dimensions was also explored. Results show that NeuroPINNs achieve high accuracy while substantially reducing communication and energy demands, marking a step toward scalable, neuromorphic-ready scientific machine learning.

academic

NeuroPINNs: तंत्रिकाविज्ञान से प्रेरित भौतिकी सूचित तंत्रिका नेटवर्क

मूल जानकारी

पेपर ID: 2511.06081
शीर्षक: NeuroPINNs: Neuroscience Inspired Physics Informed Neural Networks
लेखक: Shailesh Garg, Souvik Chakraborty (भारतीय प्रौद्योगिकी संस्थान दिल्ली)
वर्गीकरण: physics.comp-ph
प्रकाशन तिथि: 11 नवंबर, 2025 (arXiv प्रीप्रिंट)
पेपर लिंक: https://arxiv.org/abs/2511.06081

सारांश

यह पेपर NeuroPINNs प्रस्तावित करता है, जो भौतिकी सूचित तंत्रिका नेटवर्क (PINNs) का एक तंत्रिकाविज्ञान-प्रेरित विस्तार है, जो जैविक रूप से प्रेरित स्पाइकिंग न्यूरॉन मॉडल के माध्यम से ऊर्जा-कुशल आंशिक अवकल समीकरण (PDE) समाधान को सक्षम बनाता है। निरंतर सक्रियण कार्यों पर निर्भर पारंपरिक PINNs के विपरीत जो उच्च कम्प्यूटेशनल और ऊर्जा लागत उत्पन्न करते हैं, NeuroPINNs परिवर्तनशील स्पाइकिंग न्यूरॉन्स (VSNs) का उपयोग करके विरल, घटना-संचालित संचार को सक्षम बनाता है। यह विशेष रूप से न्यूरोमॉर्फिक हार्डवेयर पर तैनाती और कम्प्यूटेशनल संसाधनों की कमी वाले परिदृश्यों (जैसे एम्बेडेड और एज डिवाइस) के लिए उपयुक्त है। हालांकि, मुख्य चुनौती स्पाइकिंग न्यूरॉन्स की असंतत गतिशीलता को PINNs द्वारा आवश्यक सुचारू अवशिष्ट हानि फ़ंक्शन के साथ समन्वय करना है। इस समस्या को दूर करने के लिए, लेखकों ने अपस्केलिंग सिद्धांत से प्रेरित एक नोवल स्टोकेस्टिक प्रोजेक्शन विधि अपनाई है, जो ग्रेडिएंट अनुकूलन के साथ संगतता बनाए रखते हुए स्पाइकिंग व्यवहार को वफादारी से कैप्चर करती है। प्रयोग दर्शाते हैं कि NeuroPINNs उच्च सटीकता बनाए रखते हुए संचार और ऊर्जा आवश्यकताओं को काफी हद तक कम करते हैं।

अनुसंधान पृष्ठभूमि और प्रेरणा

1. समाधान की जाने वाली समस्या

आंशिक अवकल समीकरण (PDEs) वैज्ञानिक और इंजीनियरिंग में भौतिक स्थान को मॉडल करने के लिए मूल उपकरण हैं। पारंपरिक संख्यात्मक विधियां (जैसे परिमित तत्व विधि, परिमित अंतर विधि) सटीक होने के बावजूद, कम्प्यूटेशनल रूप से महंगी हैं। भौतिकी सूचित तंत्रिका नेटवर्क (PINNs) एक नई विकल्पित विधि के रूप में, PDE के भौतिक नियमों को तंत्रिका नेटवर्क की सीखने की प्रक्रिया में एम्बेड करके समीकरणों को हल करते हैं। हालांकि, PINNs गहन शिक्षा की अंतर्निहित कमियों को विरासत में लेते हैं: उच्च ऊर्जा खपत, जो किनारे कम्प्यूटिंग और संसाधन-सीमित वातावरण में इसकी स्केलेबिलिटी को सीमित करती है।

2. समस्या का महत्व

ऊर्जा संकट: गहन शिक्षा मॉडल के प्रशिक्षण और अनुमान के लिए बड़ी मात्रा में ऊर्जा की आवश्यकता होती है, जो मोबाइल डिवाइस, IoT और एम्बेडेड सिस्टम में इसके अनुप्रयोग को सीमित करती है
वास्तविक समय कम्प्यूटिंग आवश्यकताएं: कई वैज्ञानिक कम्प्यूटिंग परिदृश्यों को तेजी से, कम-शक्ति वाले PDE सॉल्वर की आवश्यकता होती है
न्यूरोमॉर्फिक हार्डवेयर का उदय: नई न्यूरोमॉर्फिक चिप्स (जैसे Loihi 2) घटना-संचालित, कम-शक्ति कम्प्यूटिंग प्लेटफॉर्म प्रदान करती हैं, लेकिन अनुकूलित एल्गोरिदम की आवश्यकता होती है

3. मौजूदा विधियों की सीमाएं

पारंपरिक PINNs: निरंतर सक्रियण कार्यों का उपयोग करते हैं, सभी न्यूरॉन्स लगातार सक्रिय रहते हैं, जिससे उच्च ऊर्जा खपत होती है
रूपांतरण रणनीति के साथ स्पाइकिंग PINNs (CPINNs): पहले पारंपरिक तंत्रिका नेटवर्क को प्रशिक्षित करें फिर स्पाइकिंग नेटवर्क में रूपांतरित करें, प्रतिस्पर्धी प्रदर्शन के लिए लंबे स्पाइक अनुक्रमों की आवश्यकता होती है, और रूपांतरण प्रक्रिया अनुमान त्रुटि का परिचय देती है
Leaky Integrate-and-Fire (LIF) न्यूरॉन्स: वर्गीकरण कार्यों में अच्छा प्रदर्शन करते हैं, लेकिन प्रतिगमन कार्यों (PDE समाधान का मूल) में खराब प्रदर्शन करते हैं
मौजूदा स्पाइकिंग PINNs वेरिएंट्स: अवशिष्ट हानि गणना में असंतत समस्या को प्रभावी ढंग से हल नहीं करते हैं

4. अनुसंधान प्रेरणा

जैविक न्यूरॉन्स की ऊर्जा दक्षता से प्रेरित होकर, लेखकों ने विरल, घटना-संचालित संचार तंत्र के माध्यम से ऊर्जा खपत को कम करते हुए समाधान सटीकता बनाए रखने के लिए स्पाइकिंग तंत्रिका नेटवर्क को PINNs फ्रेमवर्क में शामिल करने का प्रस्ताव दिया है।

मूल योगदान

NeuroPINNs फ्रेमवर्क प्रस्तावित करना: पहली बार परिवर्तनशील स्पाइकिंग न्यूरॉन्स (VSNs) को PINNs आर्किटेक्चर में मूल रूप से एकीकृत करना, ऊर्जा-कुशल PDE समाधान को सक्षम बनाना
नवीन ग्रेडिएंट कम्प्यूटिंग रणनीति:
- स्टोकेस्टिक प्रोजेक्शन (SP) विधि का उपयोग करके PDE अवशिष्ट हानि के लिए आवश्यक ग्रेडिएंट की गणना करना, व्यवस्थित पूर्वाग्रह का परिचय न देना
- प्रॉक्सी ग्रेडिएंट बैकप्रोपेगेशन का उपयोग करके पैरामीटर अपडेट के लिए, कम्प्यूटेशनल व्यवहार्यता सुनिश्चित करना
प्रतिगमन कार्यों के लिए VSNs: LIF न्यूरॉन्स के बजाय स्तरीकृत स्पाइकिंग (गैर-बाइनरी) के साथ VSNs का उपयोग करना, प्रतिगमन कार्यों में उत्कृष्ट प्रदर्शन करना
मूल प्रशिक्षण प्रतिमान: स्पाइकिंग डोमेन में सीधे प्रशिक्षण, रूपांतरण प्रक्रिया की आवश्यकता नहीं, अनुमान त्रुटि से बचना और छोटे स्पाइक अनुक्रमों की आवश्यकता
व्यापक प्रायोगिक सत्यापन: चार प्रतिनिधि PDE समस्याओं (नियमित और अनियमित डोमेन सहित) और त्रि-आयामी रैखिक लोचदार माइक्रोमैकेनिक्स अनुप्रयोग में प्रभावशीलता को सत्यापित करना
ऊर्जा खपत विश्लेषण: सैद्धांतिक और प्रायोगिक प्रमाण कि स्पाइकिंग गतिविधि 100% से कम होने पर महत्वपूर्ण ऊर्जा बचत (लगभग 50-70% सिनेप्टिक ऑपरेशन ऊर्जा) प्राप्त की जा सकती है

विधि विवरण

कार्य परिभाषा

सामान्य रूप के आंशिक अवकल समीकरण को हल करना:

\mathcal{N}(x, t, u, \partial_t u, \partial^2_t u, \ldots, \partial_x u, \partial^n_t u, \ldots, \partial^n_x u; \alpha_N) = 0

जहां:

$u$ : खोजा जाने वाला क्षेत्र चर, स्थानिक डोमेन $\Omega$ और समय अंतराल $(0, T]$ में परिभाषित
$\mathcal{N}$ : अरैखिक अवकल ऑपरेटर (पैरामीटर $\alpha_N$ द्वारा पैरामीटरीकृत)
$\mathcal{B}$ : सीमा ऑपरेटर (पैरामीटर $\alpha_B$ द्वारा पैरामीटरीकृत)
प्रारंभिक शर्त: $u(x, 0) = f_i(x)$
सीमा शर्त: $\mathcal{B}(u(x, t); \alpha_B) = f_b(x, t)$

मॉडल आर्किटेक्चर

1. नेटवर्क प्रतिनिधित्व

NeuroPINN गहरे तंत्रिका नेटवर्क का उपयोग करके क्षेत्र चर को अनुमानित करता है:

u \approx \mathcal{U}(x, t; w)

जहां $w$ प्रशिक्षणीय पैरामीटर हैं।

2. परिवर्तनशील स्पाइकिंग न्यूरॉन्स (VSN)

VSN की गतिशीलता को इस प्रकार परिभाषित किया गया है:

M_{\bar{t}} = \beta_l M_{\bar{t}-1} + z_{\bar{t}}

\tilde{y} = \begin{cases} 1, & M_{\bar{t}} \geq Th \\ 0, & M_{\bar{t}} < Th \end{cases}

\text{यदि } \tilde{y} = 1, \quad M_{\bar{t}} \leftarrow 0

y_{\bar{t}} = \sigma(\tilde{y} \cdot z_{\bar{t}}), \quad \text{दिया गया } \sigma(0) = 0

मुख्य विशेषताएं:

$M_{\bar{t}}$ : संचित झिल्ली विभव
$Th$ : सीमा (प्रशिक्षणीय)
$\beta_l$ : रिसाव कारक (प्रशिक्षणीय)
$\sigma(\cdot)$ : निरंतर सक्रियण फ़ंक्शन
स्तरीकृत स्पाइक्स (गैर-बाइनरी) का उत्पादन करता है, विरल संचार और निरंतर सक्रियण के लाभों को जोड़ता है

3. हानि फ़ंक्शन

कुल हानि तीन भागों से बनी है:

\mathcal{L}_{PDE} = \|\mathcal{N}(\mathcal{U}(\cdot; w); \alpha_N)\|^2_{\Omega \times (0, T]}

\mathcal{L}_{BC} = \|\mathcal{B}(\mathcal{U}(\cdot; w); \alpha_B) - f_b(\cdot)\|^2_{\partial\Omega \times (0, T]}

\mathcal{L}_{IC} = \|\mathcal{U}(\cdot; w) - f_i(\cdot)\|^2_{\Omega}

\mathcal{L}_{Total} = \lambda_{PDE} \mathcal{L}_{PDE} + \lambda_{BC} \mathcal{L}_{BC} + \lambda_{IC} \mathcal{L}_{IC}

तकनीकी नवाचार बिंदु

1. स्टोकेस्टिक प्रोजेक्शन (SP) विधि

मुख्य चुनौती: VSN की असंतत गतिशीलता सीधी ग्रेडिएंट गणना को अव्यावहारिक बनाती है। हानि की गणना के लिए प्रॉक्सी ग्रेडिएंट का उपयोग करना PDE समाधान को विकृत करेगा।

समाधान: अपस्केलिंग सिद्धांत से प्रेरित स्टोकेस्टिक प्रोजेक्शन विधि को अपनाना:

सैद्धांतिक आधार:

किसी बिंदु $z \neq x$ पर क्षेत्र चर के माप को इस प्रकार प्रस्तुत करना: $u(z) = u(x) + \Delta\eta$ जहां $\Delta\eta$ शून्य-माध्य शोर है, सूक्ष्म पैमाने के उतार-चढ़ाव का प्रतिनिधित्व करता है
बेयस फ़िल्टरिंग और Kallianpur-Striebel सूत्र के माध्यम से, ग्रेडिएंट का गैर-स्थानीय अनुमान प्राप्त करना:

G(X = \bar{X}) = \frac{\partial u}{\partial X} = \frac{\frac{1}{N_t}\sum_{i=1}^{N_t}(u - \bar{u})(X_i - \bar{X})^T}{\frac{1}{N_t}\sum_{i=1}^{N_t}(X_i - \bar{X})(X_i - \bar{X})^T}

व्यावहारिक गणना: कॉलोकेशन बिंदु $x_p$ पर, इसके पड़ोस बिंदु $\{x_i^{(n)}\}_{i=1}^{N_t}$ का उपयोग करके ग्रेडिएंट की गणना करना:

G(x = x_p) = \frac{\partial \mathcal{U}(x_p, w)}{\partial x} = \frac{\sum_{i=1}^{N_t}(\mathcal{U}(x_i^{(n)}, w) - \mathcal{U}(x_p, w))(x_i^{(n)} - x_p)^T}{\sum_{i=1}^{N_t}(x_i^{(n)} - x_p)(x_i^{(n)} - x_p)^T}

लाभ:

बैकप्रोपेगेशन पर निर्भर नहीं
नेटवर्क व्यवहार की संपूर्णता को बनाए रखता है
स्पाइकिंग गतिशीलता को वफादारी से कैप्चर करता है

2. दोहरी ग्रेडिएंट रणनीति

SP विधि: अवशिष्ट हानि में PDE ग्रेडिएंट ( $\partial u/\partial x$ आदि) की गणना के लिए
प्रॉक्सी ग्रेडिएंट बैकप्रोपेगेशन: पैरामीटर अपडेट के लिए हानि के पैरामीटर के संबंध में ग्रेडिएंट ( $\partial \mathcal{L}/\partial w$ ) की गणना के लिए

यह पृथक्करण भौतिक सटीकता और कम्प्यूटेशनल व्यवहार्यता के बीच संतुलन सुनिश्चित करता है।

3. ऊर्जा दक्षता विश्लेषण

SpiNNaker2 के आधार पर ऊर्जा अनुमान, सिनेप्टिक ऑपरेशन की ऊर्जा खपत:

पारंपरिक ANN (100% सक्रियण): $E_{ANN} = 12E \cdot n_1 \cdot n_2$

VSN परत: $E_{VSN-Syn} = 12E \cdot n_1 \cdot n_2 \cdot N_{avg\_spikes}$

जहां $E$ एकल जोड़ ऑपरेशन की ऊर्जा है। जब औसत स्पाइक संख्या $N_{avg\_spikes} < 1$ हो तो ऊर्जा बचत प्राप्त होती है।

प्रशिक्षण एल्गोरिदम

एल्गोरिदम 1:

कॉलोकेशन बिंदु, सीमा बिंदु और प्रारंभिक बिंदु का नमूना लेना
नेटवर्क भविष्यवाणी प्राप्त करना
SP विधि (सूत्र 13) का उपयोग करके प्रथम और उच्च-क्रम व्युत्पन्न की गणना करना
कुल हानि $\mathcal{L}_{Total}$ की गणना करना
प्रॉक्सी ग्रेडिएंट बैकप्रोपेगेशन का उपयोग करके $\partial \mathcal{L}/\partial w$ की गणना करना
Adam ऑप्टिमाइज़र का उपयोग करके पैरामीटर अपडेट करना

प्रायोगिक सेटअप

डेटासेट

मानक PDE समस्याएं (E-I से E-IV)

E-I: Burgers समीकरण (एक-आयामी समय-निर्भर)
- डोमेन: $x \in [0, 1], t \in (0, 1]$
- प्रारंभिक शर्त: $u(x, 0) = \sin(\pi x/l)$
- सीमा शर्त: $u(0, t) = u(1, t) = 0$
- कॉलोकेशन बिंदु: 2601, सीमा + प्रारंभिक बिंदु: 400
- परीक्षण ग्रिड: 201×201
E-II: ताप संचालन समीकरण (एक-आयामी समय-निर्भर)
- डोमेन: $x \in [0, 1], t \in (0, 1]$
- स्रोत पद: $100\sin(\pi x/l)$
- कॉलोकेशन बिंदु: 2601, सीमा + प्रारंभिक बिंदु: 400
E-III: Poisson समीकरण (L-आकार डोमेन)
- डोमेन: $x, y \in [-1, 1]$ (L-आकार अनियमित डोमेन)
- कॉलोकेशन बिंदु: 1935, सीमा बिंदु: 600
E-IV: Poisson समीकरण (तारा-आकार डोमेन)
- डोमेन: $x, y \in [-1.5, 1.5]$ (तारा-आकार अनियमित डोमेन)
- विश्लेषणात्मक समाधान: $u(x, y) = \exp(-(2x^2 + 4y^2)) + 0.5$
- कॉलोकेशन बिंदु: 4595, सीमा बिंदु: 600

त्रि-आयामी रैखिक लोचदार माइक्रोमैकेनिक्स अनुप्रयोग

संश्लेषित बहुक्रिस्टलीय माइक्रोस्ट्रक्चर:
- घनीय डोमेन $\Omega \subset \mathbb{R}^3$ , वॉक्सेल संकल्प: $32^3$
- Voronoi टेसेलेशन द्वारा लगभग 15 अनाज उत्पन्न
- प्रत्येक अनाज यादृच्छिक क्रिस्टल अभिविन्यास (SO(3) पर समान वितरण)
- सामग्री: चतुष्कोणीय TiAl
प्रशिक्षण सेट: 5000 स्वतंत्र माइक्रोस्ट्रक्चर
नेटवर्क आर्किटेक्चर: 3D अवशिष्ट कनवोल्यूशनल तंत्रिका नेटवर्क (ResNet)

मूल्यांकन मेट्रिक्स

सापेक्ष L2 त्रुटि (प्रतिशत):

\text{Error} = \frac{\|u_{true} - u_{pred}\|_2}{\|u_{true}\|_2} \times 100\%

त्रि-आयामी अनुप्रयोग: औसत सापेक्ष त्रुटि (mean relative error)

ऊर्जा मेट्रिक्स:

स्पाइकिंग गतिविधि प्रतिशत (Spiking Activity)
ऊर्जा अनुपात $E_r$ (वास्तविक ऊर्जा खपत / 100% सक्रियण ऊर्जा खपत)

तुलनात्मक विधियां

SP-PINN: SP विधि का उपयोग करने वाला पारंपरिक PINN (आधारभूत)
SB-NeuroPINN: हानि की गणना के लिए प्रॉक्सी ग्रेडिएंट का उपयोग करने वाला NeuroPINN
CPINN: रूपांतरण रणनीति का स्पाइकिंग PINN (256 स्पाइक समय चरण का उपयोग करते हुए)

कार्यान्वयन विवरण

नेटवर्क कॉन्फ़िगरेशन (E-I, E-II): 5 परत, 2-40-80-40-1, सक्रियण फ़ंक्शन: tanh
नेटवर्क कॉन्फ़िगरेशन (E-III): 5 परत, 2-40-80-40-1, सक्रियण फ़ंक्शन: ELU
नेटवर्क कॉन्फ़िगरेशन (E-IV): 5 परत, 2-40-120-40-1, सक्रियण फ़ंक्शन: tanh
VSN कॉन्फ़िगरेशन: पहली दो सक्रियण परतों को VSN परतों से बदलना
ऑप्टिमाइज़र: Adam
स्पाइक समय चरण (STS): डिफ़ॉल्ट 1 (NeuroPINN), 256 (CPINN)
इनपुट एन्कोडिंग: सीधा इनपुट (दर या समय एन्कोडिंग की आवश्यकता नहीं)

प्रायोगिक परिणाम

मुख्य परिणाम

तालिका 2: विभिन्न मॉडलों की सापेक्ष L2 त्रुटि (%)

मॉडल	E-I (Burgers)	E-II (Heat)	E-III (L-shape)	E-IV (Star)
SP-PINN	0.25	0.46	3.67	0.26
NeuroPINN	1.04	1.27	2.70	0.34
SB-NeuroPINN	6.70	1.96	DNC*	0.87
CPINN	11.87	13.75	DNC*	13.06

*DNC = Did Not Converge (अभिसरण नहीं हुआ)

मुख्य निष्कर्ष:

NeuroPINN बनाम SP-PINN: त्रुटि निकट है (E-I: 1.04% बनाम 0.25%), E-III में SP-PINN से भी बेहतर (2.70% बनाम 3.67%)
NeuroPINN बनाम SB-NeuroPINN: हानि की गणना के लिए प्रॉक्सी ग्रेडिएंट का उपयोग करने वाले संस्करण से काफी बेहतर, SP विधि की आवश्यकता को सत्यापित करता है
NeuroPINN बनाम CPINN: रूपांतरण रणनीति से बहुत बेहतर (E-I: 1.04% बनाम 11.87%), और CPINN अनियमित डोमेन पर अभिसरण नहीं करता है
अनियमित डोमेन प्रदर्शन: NeuroPINN L-आकार और तारा-आकार डोमेन दोनों पर सफलतापूर्वक अभिसरण करता है, मजबूतता प्रदर्शित करता है

ऊर्जा दक्षता विश्लेषण

चित्र 6: स्पाइकिंग गतिविधि प्रतिशत

विभिन्न उदाहरणों में दो VSN परतों की स्पाइकिंग गतिविधि:

उदाहरण	परत L1	परत L2	ऊर्जा अनुपात $E_r$
E-I	~60%	~55%	0.58
E-II	~70%	~45%	0.52
E-III	~45%	~35%	0.42
E-IV	~35%	~25%	0.29

निष्कर्ष:

सभी उदाहरणों में स्पाइकिंग गतिविधि 100% से बहुत कम है
E-IV लगभग 70% की ऊर्जा बचत (सिनेप्टिक ऑपरेशन) प्राप्त करता है
न्यूरोमॉर्फिक हार्डवेयर पर वास्तविक तैनाती में बचत अधिक महत्वपूर्ण होगी

बहु-स्पाइक समय चरण (STS) प्रयोग

तालिका 3: 2 STS का उपयोग करके प्रदर्शन

उदाहरण	त्रुटि (%)	SA-L1 संचयी	SA-L2 संचयी
E-I	0.49	0.50	0.72
E-II	1.06	0.70	0.55
E-III	2.67	0.38	0.27
E-IV	0.22	0.35	0.14

निष्कर्ष:

2 STS का उपयोग करके त्रुटि को और कम करना (E-I: 1.04%→0.49%)
संचयी स्पाइकिंग गतिविधि अभी भी 100% से बहुत कम है
प्रमाणित करता है कि बहु-STS सटीकता में सुधार करते हुए ऊर्जा दक्षता बनाए रख सकते हैं

त्रि-आयामी माइक्रोमैकेनिक्स अनुप्रयोग

von-Mises समतुल्य प्रतिबल भविष्यवाणी

मॉडल	औसत सापेक्ष त्रुटि (%)	स्पाइकिंग गतिविधि
पारंपरिक आर्किटेक्चर	1.68	-
NeuroPINN	3.43	<21% (10/12 परत)

अवलोकन:

NeuroPINN जटिल त्रि-आयामी समस्याओं पर उचित सटीकता बनाए रखता है
12 स्पाइकिंग परतों में 10 की स्पाइकिंग गतिविधि <21% है
वास्तविक वैज्ञानिक कम्प्यूटिंग में अनुप्रयोग क्षमता प्रदर्शित करता है

विलोपन प्रयोग

SP विधि बनाम प्रॉक्सी ग्रेडिएंट

SB-NeuroPINN और NeuroPINN की तुलना के माध्यम से (तालिका 2):

E-I में, SB-NeuroPINN त्रुटि 6.70% तक बढ़ जाती है (NeuroPINN: 1.04%)
E-III में, SB-NeuroPINN अभिसरण नहीं करता है
निष्कर्ष: SP विधि भौतिक सटीकता बनाए रखने के लिए महत्वपूर्ण है

मूल प्रशिक्षण बनाम रूपांतरण रणनीति

CPINN तुलना के माध्यम से:

CPINN को 256 STS की आवश्यकता है, NeuroPINN को केवल 1-2
CPINN अनियमित डोमेन पर विफल होता है
निष्कर्ष: मूल प्रशिक्षण अधिक कुशल और मजबूत है

केस विश्लेषण

चित्र 2-5 विभिन्न विधियों की भविष्यवाणी और निरपेक्ष त्रुटि प्रदर्शित करते हैं:

NeuroPINN भविष्यवाणी: सच्चे मान के साथ अत्यधिक सुसंगत, त्रुटि वितरण समान
SB-NeuroPINN: जटिल क्षेत्रों में स्पष्ट विचलन
CPINN: काफी बड़ी त्रुटि, स्थानिक वितरण असमान

निष्कर्ष और चर्चा

मुख्य निष्कर्ष

प्रभावशीलता सत्यापन: NeuroPINNs चार PDE बेंचमार्क और त्रि-आयामी व्यावहारिक अनुप्रयोग में अच्छा प्रदर्शन करते हैं, सटीकता पारंपरिक PINNs के निकट है
ऊर्जा दक्षता: विरल स्पाइकिंग संचार के माध्यम से लगभग 50-70% सिनेप्टिक ऑपरेशन ऊर्जा बचत प्राप्त करना
विधि श्रेष्ठता:
- हानि की गणना के लिए प्रॉक्सी ग्रेडिएंट का उपयोग करने वाले SB-NeuroPINN से बेहतर
- रूपांतरण रणनीति के CPINN से काफी बेहतर
- अनियमित डोमेन पर मजबूतता प्रदर्शित करता है
बहु-STS लाभ: कई स्पाइक समय चरणों का उपयोग करके सटीकता को और बेहतर बनाया जा सकता है, ऊर्जा दक्षता बनाए रखते हुए
मूल प्रशिक्षण लाभ: स्पाइकिंग डोमेन में सीधे प्रशिक्षण रूपांतरण रणनीति से अधिक विश्वसनीय है

सीमाएं

सटीकता में कमी: पारंपरिक SP-PINN की तुलना में, NeuroPINN की त्रुटि थोड़ी अधिक है (लेकिन अंतर छोटा है)
त्रि-आयामी अनुप्रयोग सटीकता: जटिल त्रि-आयामी समस्याओं में, त्रुटि 1.68% से 3.43% तक बढ़ जाती है
VSN ऊर्जा खपत: स्तरीकृत स्पाइक्स की ऊर्जा दक्षता बाइनरी LIF न्यूरॉन्स से कम है (लेकिन अभी भी पारंपरिक न्यूरॉन्स से बेहतर है)
पड़ोस बिंदु आवश्यकता: SP विधि को अतिरिक्त पड़ोस बिंदु गणना की आवश्यकता है, नमूना जटिलता बढ़ाता है
प्रशिक्षण एल्गोरिदम: अभी भी पैरामीटर अपडेट के लिए प्रॉक्सी ग्रेडिएंट पर निर्भर है, भविष्य में SNNs के लिए अधिक उपयुक्त प्रशिक्षण विधियों की खोज की जा सकती है
हार्डवेयर सत्यापन की कमी: Loihi 2 जैसे वास्तविक न्यूरोमॉर्फिक हार्डवेयर पर परीक्षण नहीं किया गया है

भविष्य की दिशाएं

प्रशिक्षण एल्गोरिदम में सुधार: पूरी तरह से प्रॉक्सी ग्रेडिएंट की आवश्यकता के बिना प्रशिक्षण विधियां विकसित करना
हार्डवेयर तैनाती: Loihi 2 जैसी न्यूरोमॉर्फिक चिप्स पर कार्यान्वयन और परीक्षण
अनुप्रयोग विस्तार: अधिक जटिल PDE सिस्टम (जैसे Navier-Stokes समीकरण) की खोज
अनुकूली STS: सटीकता और दक्षता के बीच संतुलन के लिए स्पाइक समय चरणों की संख्या को गतिशील रूप से समायोजित करना
सैद्धांतिक विश्लेषण: अभिसरण और त्रुटि सीमा के लिए सैद्धांतिक गारंटी प्रदान करना

गहन मूल्यांकन

शक्तियां

1. नवाचार

पहली मूल एकीकरण: VSNs को PINNs में मूल रूप से एकीकृत करने वाला पहला कार्य
चतुर दोहरी ग्रेडिएंट रणनीति: SP विधि भौतिक सटीकता सुनिश्चित करती है, प्रॉक्सी ग्रेडिएंट प्रशिक्षणीयता सुनिश्चित करती है
ठोस सैद्धांतिक आधार: SP विधि अपस्केलिंग सिद्धांत से आती है, मजबूत गणितीय आधार है

2. प्रायोगिक पूर्णता

विविध परीक्षण: समय-निर्भर, स्थिर-अवस्था, नियमित डोमेन, अनियमित डोमेन को शामिल करता है
व्यापक तुलना: कई आधारभूत विधियों के साथ तुलना, विलोपन प्रयोग सहित
ऊर्जा विश्लेषण: विस्तृत स्पाइकिंग गतिविधि और ऊर्जा अनुमान प्रदान करता है
व्यावहारिक अनुप्रयोग: त्रि-आयामी माइक्रोमैकेनिक्स केस व्यावहारिक मूल्य प्रदर्शित करता है

3. परिणाम विश्वसनीयता

सुसंगत लाभ: सभी परीक्षणों में CPINN से बेहतर
मजबूतता: अनियमित डोमेन पर सफलता (प्रतिस्पर्धी विधियां विफल)
परिमाणित ऊर्जा बचत: विशिष्ट ऊर्जा अनुपात डेटा प्रदान करता है
दृश्य स्पष्टता: ग्राफ़ और तालिकाएं परिणामों को स्पष्ट रूप से प्रदर्शित करती हैं

4. लेखन गुणवत्ता

स्पष्ट संरचना: विधि, प्रयोग, विश्लेषण तार्किक रूप से जुड़े हुए हैं
गणितीय कठोरता: सूत्र व्युत्पत्ति विस्तृत, प्रतीक स्पष्ट रूप से परिभाषित
अच्छा दृश्य: चित्र परिणामों को सहज रूप से प्रदर्शित करते हैं

कमियां

1. विधि सीमाएं

सटीकता त्याग: ऊर्जा दक्षता के लिए कुछ सटीकता का त्याग (हालांकि छोटा)
पड़ोस निर्भरता: SP विधि को अतिरिक्त पड़ोस बिंदुओं की आवश्यकता है, नमूना जटिलता बढ़ाता है
VSN चयन: अन्य नई स्पाइकिंग न्यूरॉन्स पर VSN की श्रेष्ठता पर पर्याप्त चर्चा नहीं

2. प्रायोगिक खामियां

हार्डवेयर सत्यापन की कमी: ऊर्जा बचत केवल सैद्धांतिक अनुमान है, वास्तविक न्यूरोमॉर्फिक हार्डवेयर पर परीक्षण नहीं किया गया है
हाइपरपैरामीटर संवेदनशीलता: VSN सीमा, रिसाव कारक आदि के प्रति संवेदनशीलता का विश्लेषण नहीं किया गया है
स्केलेबिलिटी: बड़े पैमाने या उच्च-आयामी समस्याओं पर परीक्षण नहीं किया गया है
CPINN ट्यूनिंग अपर्याप्त: लेखकों ने स्वीकार किया कि CPINN बेहतर कैलिब्रेशन के माध्यम से प्रदर्शन में सुधार कर सकता है

3. विश्लेषण अपर्याप्त

अभिसरण विश्लेषण: सैद्धांतिक अभिसरण गारंटी की कमी
त्रुटि स्रोत: त्रुटि वृद्धि के विशिष्ट कारणों का गहन विश्लेषण नहीं
SP विधि ओवरहेड: SP विधि की अतिरिक्त कम्प्यूटेशनल लागत को परिमाणित नहीं किया गया है
LIF के साथ तुलना: LIF की विफलता का उल्लेख किया गया है, लेकिन विस्तृत परिणाम नहीं दिए गए हैं

4. पुनरुत्पादनीयता

कोड खुला नहीं: पेपर कोड लिंक प्रदान नहीं करता है
कार्यान्वयन विवरण: कुछ प्रशिक्षण विवरण (जैसे सीखने की दर शेड्यूलिंग, प्रारंभिक रोक) स्पष्ट नहीं हैं
यादृच्छिकता नियंत्रण: यादृच्छिक बीज सेटिंग का उल्लेख नहीं किया गया है

प्रभाव

1. क्षेत्र में योगदान

अग्रणी कार्य: ऊर्जा-कुशल वैज्ञानिक मशीन लर्निंग के लिए नई दिशा खोलता है
पद्धति योगदान: SP विधि और स्पाइकिंग तंत्रिका नेटवर्क का संयोजन सार्वभौमिक है
पुल भूमिका: न्यूरोमॉर्फिक कम्प्यूटिंग और वैज्ञानिक कम्प्यूटिंग को जोड़ता है

2. व्यावहारिक मूल्य

किनारे कम्प्यूटिंग: मोबाइल डिवाइस और IoT परिदृश्यों के लिए उपयुक्त
वास्तविक समय अनुप्रयोग: कम विलंबता की घटना-संचालित कम्प्यूटिंग
टिकाऊ AI: ऊर्जा खपत में कमी हरित AI प्रवृत्ति के अनुरूप है

3. संभावित प्रभाव

बाद के अनुसंधान को प्रेरित करना: अधिक स्पाइकिंग PINNs वेरिएंट्स को ट्रिगर कर सकता है
हार्डवेयर संचालन: न्यूरोमॉर्फिक हार्डवेयर के लिए व्यावहारिक अनुप्रयोग प्रदान करता है
अंतःविषय संलयन: तंत्रिकाविज्ञान और कम्प्यूटेशनल भौतिकी के बीच क्रॉस-डोमेन सहयोग को बढ़ावा देता है

उपयुक्त परिदृश्य

आदर्श परिदृश्य

संसाधन-सीमित वातावरण: एम्बेडेड सिस्टम, किनारे डिवाइस, मोबाइल प्लेटफॉर्म
वास्तविक समय PDE समाधान: तेजी से प्रतिक्रिया की आवश्यकता वाली नियंत्रण प्रणालियां
बड़े पैमाने पर समानांतर कम्प्यूटिंग: न्यूरोमॉर्फिक चिप सरणियों पर तैनाती
मध्यम सटीकता आवश्यकताएं: 1-3% त्रुटि सहन कर सकने वाले अनुप्रयोग

अनुपयुक्त परिदृश्य

अत्यधिक सटीकता आवश्यकताएं: जैसे एयरोस्पेस में महत्वपूर्ण कम्प्यूटिंग
पारंपरिक हार्डवेयर पर्याप्त: पर्याप्त GPU/CPU संसाधन होने पर, पारंपरिक PINNs सरल हैं
अति-बड़े पैमाने की समस्याएं: स्केलेबिलिटी अभी तक पूरी तरह से सत्यापित नहीं है
गैर-प्रतिगमन कार्य: विधि PDE समाधान के लिए डिज़ाइन की गई है

तकनीकी हाइलाइट्स

दोहरी ग्रेडिएंट पृथक्करण: भौतिक ग्रेडिएंट कम्प्यूटिंग को पैरामीटर ग्रेडिएंट कम्प्यूटिंग से अलग करना, सटीकता और प्रशिक्षणीयता दोनों को संतुलित करना
स्तरीकृत स्पाइकिंग तंत्र: VSN का गैर-बाइनरी आउटपुट विरलता और अभिव्यक्ति क्षमता के बीच संतुलन प्राप्त करता है
रूपांतरण-मुक्त प्रशिक्षण: रूपांतरण रणनीति की अनुमान त्रुटि और लंबे स्पाइक अनुक्रम की आवश्यकता से बचना
सैद्धांतिक समर्थन: SP विधि के पास स्टोकेस्टिक अवकल समीकरण सिद्धांत का ठोस आधार है

संदर्भ (मुख्य साहित्य)

Raissi et al., 2019: Physics-informed neural networks (मूल PINNs पेपर)
Garg & Chakraborty, 2023: Variable spiking neurons for regression (VSN प्रस्ताव)
Nowruzpour et al., 2019: Derivative-free upscaled theory (SP विधि सैद्धांतिक आधार)
Navaneeth & Chakraborty, 2023: Stochastic projection for PINNs (SP-PINN)
Theilman et al., 2024: Spiking PINNs on Loihi 2 (CPINN)
Davidson & Furber, 2021: Energy comparison of ANNs and SNNs (ऊर्जा विश्लेषण)

समग्र मूल्यांकन

यह एक उच्च नवाचार और ठोस प्रयोग वाला कार्य है, जो स्पाइकिंग तंत्रिका नेटवर्क को भौतिकी सूचित तंत्रिका नेटवर्क क्षेत्र में सफलतापूर्वक शामिल करता है। मुख्य योगदान मूल प्रशिक्षण प्रतिमान और दोहरी ग्रेडिएंट कम्प्यूटिंग रणनीति प्रस्तावित करना है, जो स्पाइकिंग न्यूरॉन्स की असंतत प्रकृति और PDE समाधान की सुचारू आवश्यकता के बीच विरोधाभास को प्रभावी ढंग से हल करता है। प्रायोगिक परिणाम उचित सटीकता बनाए रखते हुए महत्वपूर्ण ऊर्जा बचत प्राप्त करने की क्षमता प्रदर्शित करते हैं।

मुख्य शक्तियां विधि की कठोरता और प्रयोगों की व्यापकता हैं, विशेष रूप से अनियमित डोमेन पर मजबूतता प्रदर्शन। मुख्य कमियां वास्तविक हार्डवेयर सत्यापन की कमी और सैद्धांतिक अभिसरण विश्लेषण हैं। कुल मिलाकर, यह ऊर्जा-कुशल वैज्ञानिक कम्प्यूटिंग विकास को आगे बढ़ाने वाला महत्वपूर्ण कार्य है, न्यूरोमॉर्फिक कम्प्यूटिंग के वैज्ञानिक क्षेत्र में अनुप्रयोग के लिए शक्तिशाली प्रदर्शन प्रदान करता है। भविष्य के कार्य हार्डवेयर तैनाती और स्केलेबिलिटी सत्यापन पर ध्यान केंद्रित करने की सिफारिश की जाती है।