2025-11-12T03:25:26.827461

NeuroPINNs: Neuroscience Inspired Physics Informed Neural Networks

Garg, Chakraborty

We introduce NeuroPINNs, a neuroscience-inspired extension of Physics-Informed Neural Networks (PINNs) that incorporates biologically motivated spiking neuron models to achieve energy-efficient PDE solving. Unlike conventional PINNs, which rely on continuously firing activations and therefore incur high computational and energy costs, NeuroPINNs leverage Variable Spiking Neurons (VSNs) to enable sparse, event-driven communication. This makes them particularly well-suited for deployment on neuromorphic hardware and for scenarios with constrained computational resources, such as embedded and edge devices. A central challenge, however, lies in reconciling the discontinuous dynamics of spiking neurons with the smooth residual-based loss formulation required in PINNs. Direct smoothing introduces systematic biases, leading to inaccurate PDE learning. To overcome this, we employ a novel stochastic projection method inspired from upscaled theory that faithfully captures spiking behavior while maintaining compatibility with gradient-based optimization. Standard surrogate backpropagation is used for parameter updates, ensuring computational tractability. We demonstrate the effectiveness of NeuroPINNs on four representative PDE problems across both regular and irregular domains. Furthermore, application of NeuroPINN for linear elastic micromechnics in three dimensions was also explored. Results show that NeuroPINNs achieve high accuracy while substantially reducing communication and energy demands, marking a step toward scalable, neuromorphic-ready scientific machine learning.

academic

NeuroPINNs: নিউরোসায়েন্স অনুপ্রাণিত ফিজিক্স ইনফর্মড নিউরাল নেটওয়ার্ক

মৌলিক তথ্য

পেপার আইডি: 2511.06081
শিরোনাম: NeuroPINNs: Neuroscience Inspired Physics Informed Neural Networks
লেখক: শেইলেশ গার্গ, সৌভিক চক্রবর্তী (ভারতীয় প্রযুক্তি প্রতিষ্ঠান দিল্লি)
শ্রেণীবিভাগ: physics.comp-ph
প্রকাশনার সময়: নভেম্বর ১১, ২০২৫ (arXiv প্রি-প্রিন্ট)
পেপার লিঙ্ক: https://arxiv.org/abs/2511.06081

সারসংক্ষেপ

এই পেপারটি NeuroPINNs প্রস্তাব করে, যা একটি নিউরোসায়েন্স-অনুপ্রাণিত ফিজিক্স ইনফর্মড নিউরাল নেটওয়ার্ক (PINN) সম্প্রসারণ যা জৈব-প্রেরিত স্পাইকিং নিউরন মডেলের মাধ্যমে শক্তি-দক্ষ আংশিক ডিফারেনশিয়াল সমীকরণ (PDE) সমাধান বাস্তবায়ন করে। ক্রমাগত সক্রিয়করণ ফাংশনের উপর নির্ভরশীল ঐতিহ্যবাহী PINNs-এর বিপরীতে যা উচ্চ গণনা এবং শক্তি খরচ তৈরি করে, NeuroPINNs পরিবর্তনশীল স্পাইকিং নিউরন (VSN) ব্যবহার করে বিরল ইভেন্ট-চালিত যোগাযোগ বাস্তবায়ন করে। এটি বিশেষভাবে নিউরোমরফিক হার্ডওয়্যারে স্থাপনার জন্য এবং সীমিত গণনা সম্পদের পরিস্থিতিতে (যেমন এম্বেডেড এবং এজ ডিভাইস) উপযুক্ত। তবে মূল চ্যালেঞ্জ হল স্পাইকিং নিউরনের অসংতত গতিশীলতা এবং PINNs-এর জন্য প্রয়োজনীয় মসৃণ অবশিষ্ট ক্ষতি ফাংশনের সমন্বয়। এই সমস্যা অতিক্রম করার জন্য, লেখকরা আপস্কেলিং তত্ত্ব দ্বারা অনুপ্রাণিত একটি উপন্যাস স্টোকাস্টিক প্রজেকশন পদ্ধতি গ্রহণ করেছেন যা গ্রেডিয়েন্ট অপ্টিমাইজেশনের সাথে সামঞ্জস্যপূর্ণ থাকার সময় স্পাইকিং আচরণ বিশ্বস্তভাবে ক্যাপচার করে। পরীক্ষা-নিরীক্ষা দেখায় যে NeuroPINNs উচ্চ নির্ভুলতা বজায় রেখে যোগাযোগ এবং শক্তির চাহিদা উল্লেখযোগ্যভাবে হ্রাস করে।

গবেষণা পটভূমি এবং প্রেরণা

১. সমাধান করার সমস্যা

আংশিক ডিফারেনশিয়াল সমীকরণ (PDE) বিজ্ঞান এবং প্রকৌশলে ভৌত স্থান মডেলিংয়ের মূল সরঞ্জাম। ঐতিহ্যবাহী সংখ্যাসূচক পদ্ধতি (যেমন ফিনিট এলিমেন্ট পদ্ধতি, ফিনিট ডিফারেন্স পদ্ধতি) যদিও নির্ভুল, তবে গণনা খরচ বেশি। ফিজিক্স ইনফর্মড নিউরাল নেটওয়ার্ক (PINN) একটি নতুন বিকল্প হিসাবে উদ্ভূত হয়েছে যা PDE-এর ভৌত নিয়মকে নিউরাল নেটওয়ার্কের শেখার প্রক্রিয়ায় এম্বেড করে সমীকরণ সমাধান করে। তবে, PINNs গভীর শেখার অন্তর্নিহিত ত্রুটি উত্তরাধিকার সূত্রে পায়: উচ্চ শক্তি খরচ, যা এজ কম্পিউটিং এবং সম্পদ-সীমিত পরিবেশে এর স্কেলেবিলিটি সীমিত করে।

২. সমস্যার গুরুত্ব

শক্তি সংকট: গভীর শেখার মডেলের প্রশিক্ষণ এবং অনুমান বিশাল শক্তি প্রয়োজন, মোবাইল ডিভাইস, IoT এবং এম্বেডেড সিস্টেমে এর প্রয়োগ সীমিত করে
রিয়েল-টাইম গণনার চাহিদা: অনেক বৈজ্ঞানিক গণনা পরিস্থিতিতে দ্রুত, কম-শক্তি PDE সমাধানকারীর প্রয়োজন
নিউরোমরফিক হার্ডওয়্যারের উত্থান: নতুন নিউরোমরফিক চিপ (যেমন Loihi 2) ইভেন্ট-চালিত কম-শক্তি গণনা প্ল্যাটফর্ম প্রদান করে, কিন্তু অভিযোজিত অ্যালগরিদম প্রয়োজন

৩. বিদ্যমান পদ্ধতির সীমাবদ্ধতা

ঐতিহ্যবাহী PINN: ক্রমাগত সক্রিয়করণ ফাংশন ব্যবহার করে, সমস্ত নিউরন ক্রমাগত সক্রিয় থাকে, উচ্চ শক্তি খরচ ঘটায়
রূপান্তর কৌশলের স্পাইকিং PINN (CPINN): প্রথমে ঐতিহ্যবাহী নিউরাল নেটওয়ার্ক প্রশিক্ষণ করুন তারপর স্পাইকিং নেটওয়ার্কে রূপান্তরিত করুন, প্রতিযোগিতামূলক কর্মক্ষমতা অর্জনের জন্য দীর্ঘ স্পাইক সিকোয়েন্স প্রয়োজন, এবং রূপান্তর প্রক্রিয়া অনুমান ত্রুটি প্রবর্তন করে
Leaky Integrate-and-Fire (LIF) নিউরন: শ্রেণীবিভাগ কাজে ভাল পারফর্ম করে, কিন্তু রিগ্রেশন কাজে (PDE সমাধানের মূল) দুর্বল কর্মক্ষমতা
বিদ্যমান স্পাইকিং PINN ভেরিয়েন্ট: অবশিষ্ট ক্ষতি গণনায় অসংততা কার্যকরভাবে সমাধান করতে ব্যর্থ

৪. গবেষণা প্রেরণা

জৈব নিউরনের শক্তি দক্ষতা দ্বারা অনুপ্রাণিত, লেখকরা স্পাইকিং নিউরাল নেটওয়ার্ক PINN ফ্রেমওয়ার্কে প্রবর্তন করার প্রস্তাব দেন, বিরল, ইভেন্ট-চালিত যোগাযোগ প্রক্রিয়ার মাধ্যমে শক্তি খরচ হ্রাস করার সময় সমাধান নির্ভুলতা বজায় রাখে।

মূল অবদান

১. NeuroPINNs ফ্রেমওয়ার্ক প্রস্তাব: প্রথমবারের মতো পরিবর্তনশীল স্পাইকিং নিউরন (VSN) PINN আর্কিটেকচারে নেটিভভাবে একীভূত করা, শক্তি-দক্ষ PDE সমাধান বাস্তবায়ন করা

২. উদ্ভাবনী গ্রেডিয়েন্ট গণনা কৌশল:

PDE অবশিষ্ট ক্ষতির জন্য প্রয়োজনীয় গ্রেডিয়েন্ট গণনার জন্য স্টোকাস্টিক প্রজেকশন (SP) পদ্ধতি ব্যবহার করা, সিস্টেমেটিক পক্ষপাত প্রবর্তন এড়ানো
প্যারামিটার আপডেটের জন্য প্রক্সি গ্রেডিয়েন্ট ব্যাকপ্রপাগেশন ব্যবহার করা, গণনা সম্ভাব্যতা নিশ্চিত করা

३. রিগ্রেশন কাজের জন্য VSN: LIF নিউরনের পরিবর্তে স্তরযুক্ত স্পাইক (অ-বাইনারি) সহ VSN ব্যবহার করা, রিগ্রেশন কাজে উৎকৃষ্ট কর্মক্ষমতা প্রদান করা

४. নেটিভ প্রশিক্ষণ প্যারাডাইম: রূপান্তর প্রক্রিয়া ছাড়াই সরাসরি স্পাইকিং ডোমেনে প্রশিক্ষণ দেওয়া, অনুমান ত্রুটি এড়ানো এবং ছোট স্পাইক সিকোয়েন্সের প্রয়োজন

५. ব্যাপক পরীক্ষামূলক যাচাইকরণ: চারটি প্রতিনিধিত্বমূলক PDE সমস্যা (নিয়মিত এবং অনিয়মিত ডোমেন সহ) এবং ত্রিমাত্রিক রৈখিক স্থিতিস্থাপক মাইক্রোমেকানিক্স প্রয়োগে কার্যকারিতা যাচাই করা

६. শক্তি খরচ বিশ্লেষণ: স্পাইকিং কার্যকলাপ ১০০% এর নিচে থাকলে উল্লেখযোগ্য শক্তি সঞ্চয় অর্জনযোগ্য তা তাত্ত্বিক এবং পরীক্ষামূলকভাবে প্রমাণ করা (সিন্যাপ্টিক অপারেশন শক্তির প্রায় ৫০-৭০%)

পদ্ধতির বিস্তারিত বিবরণ

কাজের সংজ্ঞা

সাধারণ ফর্মের একটি আংশিক ডিফারেনশিয়াল সমীকরণ সমাধান করা:

\mathcal{N}(x, t, u, \partial_t u, \partial^2_t u, \ldots, \partial_x u, \partial^n_t u, \ldots, \partial^n_x u; \alpha_N) = 0

যেখানে:

$u$ : খোঁজা ক্ষেত্র পরিবর্তনশীল, স্থান ডোমেইন $\Omega$ এবং সময় ব্যবধান $(0, T]$ এ সংজ্ঞায়িত
$\mathcal{N}$ : অরৈখিক ডিফারেনশিয়াল অপারেটর (প্যারামিটার $\alpha_N$ দ্বারা প্যারামিটারাইজড)
$\mathcal{B}$ : সীমানা অপারেটর (প্যারামিটার $\alpha_B$ দ্বারা প্যারামিটারাইজড)
প্রাথমিক শর্ত: $u(x, 0) = f_i(x)$
সীমানা শর্ত: $\mathcal{B}(u(x, t); \alpha_B) = f_b(x, t)$

মডেল আর্কিটেকচার

১. নেটওয়ার্ক প্রতিনিধিত্ব

NeuroPINN একটি গভীর নিউরাল নেটওয়ার্ক ব্যবহার করে ক্ষেত্র পরিবর্তনশীল অনুমান করে:

u \approx \mathcal{U}(x, t; w)

যেখানে $w$ প্রশিক্ষণযোগ্য প্যারামিটার।

२. পরিবর্তনশীল স্পাইকিং নিউরন (VSN)

VSN-এর গতিশীলতা সংজ্ঞায়িত করা হয়:

M_{\bar{t}} = \beta_l M_{\bar{t}-1} + z_{\bar{t}}

\tilde{y} = \begin{cases} 1, & M_{\bar{t}} \geq Th \\ 0, & M_{\bar{t}} < Th \end{cases}

\text{যদি } \tilde{y} = 1, \quad M_{\bar{t}} \leftarrow 0

y_{\bar{t}} = \sigma(\tilde{y} \cdot z_{\bar{t}}), \quad \text{দেওয়া } \sigma(0) = 0

মূল বৈশিষ্ট্য:

$M_{\bar{t}}$ : সঞ্চিত ঝিল্লি সম্ভাবনা
$Th$ : থ্রেশহোল্ড (প্রশিক্ষণযোগ্য)
$\beta_l$ : ফুটো ফ্যাক্টর (প্রশিক্ষণযোগ্য)
$\sigma(\cdot)$ : ক্রমাগত সক্রিয়করণ ফাংশন
স্তরযুক্ত স্পাইক (অ-বাইনারি) উৎপাদন করে, বিরল যোগাযোগ এবং ক্রমাগত সক্রিয়করণের সুবিধা একত্রিত করে

३. ক্ষতি ফাংশন

মোট ক্ষতি তিনটি অংশ নিয়ে গঠিত:

\mathcal{L}_{PDE} = \|\mathcal{N}(\mathcal{U}(\cdot; w); \alpha_N)\|^2_{\Omega \times (0, T]}

\mathcal{L}_{BC} = \|\mathcal{B}(\mathcal{U}(\cdot; w); \alpha_B) - f_b(\cdot)\|^2_{\partial\Omega \times (0, T]}

\mathcal{L}_{IC} = \|\mathcal{U}(\cdot; w) - f_i(\cdot)\|^2_{\Omega}

\mathcal{L}_{Total} = \lambda_{PDE} \mathcal{L}_{PDE} + \lambda_{BC} \mathcal{L}_{BC} + \lambda_{IC} \mathcal{L}_{IC}

প্রযুক্তিগত উদ্ভাবন পয়েন্ট

१. স্টোকাস্টিক প্রজেকশন (SP) পদ্ধতি

মূল চ্যালেঞ্জ: VSN-এর অসংত গতিশীলতা সরাসরি গ্রেডিয়েন্ট গণনা অসম্ভব করে তোলে। ক্ষতি গণনার জন্য প্রক্সি গ্রেডিয়েন্ট ব্যবহার করা PDE সমাধান বিকৃত করে।

সমাধান: আপস্কেলিং তত্ত্ব-অনুপ্রাণিত স্টোকাস্টিক প্রজেকশন পদ্ধতি গ্রহণ করা:

তাত্ত্বিক ভিত্তি:

কোনো বিন্দু $z \neq x$ এ ক্ষেত্র পরিবর্তনশীলের পরিমাপ প্রতিনিধিত্ব করা: $u(z) = u(x) + \Delta\eta$ যেখানে $\Delta\eta$ শূন্য-মধ্যম শব্দ, মাইক্রোস্কেল ওঠানামা প্রতিনিধিত্ব করে
বেয়েসীয় ফিল্টারিং এবং Kallianpur-Striebel সূত্রের মাধ্যমে, গ্রেডিয়েন্টের অ-স্থানীয় অনুমান পান:

G(X = \bar{X}) = \frac{\partial u}{\partial X} = \frac{\frac{1}{N_t}\sum_{i=1}^{N_t}(u - \bar{u})(X_i - \bar{X})^T}{\frac{1}{N_t}\sum_{i=1}^{N_t}(X_i - \bar{X})(X_i - \bar{X})^T}

ব্যবহারিক গণনা: কনফিগারেশন বিন্দু $x_p$ এ, এর প্রতিবেশী বিন্দু $\{x_i^{(n)}\}_{i=1}^{N_t}$ ব্যবহার করে গ্রেডিয়েন্ট গণনা করা:

G(x = x_p) = \frac{\partial \mathcal{U}(x_p, w)}{\partial x} = \frac{\sum_{i=1}^{N_t}(\mathcal{U}(x_i^{(n)}, w) - \mathcal{U}(x_p, w))(x_i^{(n)} - x_p)^T}{\sum_{i=1}^{N_t}(x_i^{(n)} - x_p)(x_i^{(n)} - x_p)^T}

সুবিধা:

ব্যাকপ্রপাগেশনের উপর নির্ভর করে না
নেটওয়ার্ক আচরণের সম্পূর্ণতা বজায় রাখে
স্পাইকিং গতিশীলতা বিশ্বস্তভাবে ক্যাপচার করে

२. দ্বৈত গ্রেডিয়েন্ট কৌশল

SP পদ্ধতি: অবশিষ্ট ক্ষতিতে PDE গ্রেডিয়েন্ট গণনার জন্য ব্যবহৃত ( $\partial u/\partial x$ ইত্যাদি)
প্রক্সি গ্রেডিয়েন্ট ব্যাকপ্রপাগেশন: প্যারামিটার আপডেটের জন্য ক্ষতির প্যারামিটারের প্রতি গ্রেডিয়েন্ট গণনার জন্য ব্যবহৃত ( $\partial \mathcal{L}/\partial w$ )

এই বিচ্ছেদ ভৌত নির্ভুলতা এবং গণনা সম্ভাব্যতার ভারসাম্য নিশ্চিত করে।

३. শক্তি দক্ষতা বিশ্লেষণ

SpiNNaker2-এর উপর ভিত্তি করে শক্তি অনুমান, সিন্যাপ্টিক অপারেশনের শক্তি খরচ:

ঐতিহ্যবাহী ANN (১০০% সক্রিয়করণ): $E_{ANN} = 12E \cdot n_1 \cdot n_2$

VSN স্তর: $E_{VSN-Syn} = 12E \cdot n_1 \cdot n_2 \cdot N_{avg\_spikes}$

যেখানে $E$ একক সংযোজন অপারেশনের শক্তি। যখন গড় স্পাইক সংখ্যা $N_{avg\_spikes} < 1$ হয় তখন শক্তি সঞ্চয় অর্জন করা হয়।

প্রশিক্ষণ অ্যালগরিদম

অ্যালগরিদম ১: १. কনফিগারেশন পয়েন্ট, সীমানা পয়েন্ট এবং প্রাথমিক পয়েন্ট নমুনা করা २. নেটওয়ার্ক পূর্বাভাস পান ३. SP পদ্ধতি (সূত্র ১३) ব্যবহার করে প্রথম এবং উচ্চ-ক্রম ডেরিভেটিভ গণনা করা ४. মোট ক্ষতি $\mathcal{L}_{Total}$ গণনা করা ५. প্রক্সি গ্রেডিয়েন্ট ব্যাকপ্রপাগেশন ব্যবহার করে $\partial \mathcal{L}/\partial w$ গণনা করা ६. Adam অপ্টিমাইজার ব্যবহার করে প্যারামিটার আপডেট করা

পরীক্ষামূলক সেটআপ

ডেটাসেট

মান PDE সমস্যা (E-I থেকে E-IV)

१. E-I: Burgers সমীকরণ (এক-মাত্রিক সময়-নির্ভর)

ডোমেইন: $x \in [0, 1], t \in (0, 1]$
প্রাথমিক শর্ত: $u(x, 0) = \sin(\pi x/l)$
সীমানা শর্ত: $u(0, t) = u(1, t) = 0$
কনফিগারেশন পয়েন্ট: ২৬০१ টি, সীমানা+প্রাথমিক পয়েন্ট: ४०० টি
পরীক্ষা গ্রিড: २०१×२०१

२. E-II: তাপ পরিবহন সমীকরণ (এক-মাত্রিক সময়-নির্ভর)

ডোমেইন: $x \in [0, 1], t \in (0, 1]$
উৎস পদ: $100\sin(\pi x/l)$
কনফিগারেশন পয়েন্ট: २६०१ টি, সীমানা+প্রাথমিক পয়েন্ট: ४०० টি

३. E-III: Poisson সমীকরণ (L-আকৃতির ডোমেইন)

ডোমেইন: $x, y \in [-1, 1]$ (L-আকৃতির অনিয়মিত ডোমেইন)
কনফিগারেশন পয়েন্ট: १९३५ টি, সীমানা পয়েন্ট: ६०० টি

४. E-IV: Poisson সমীকরণ (তারকা-আকৃতির ডোমেইন)

ডোমেইন: $x, y \in [-1.5, 1.5]$ (তারকা-আকৃতির অনিয়মিত ডোমেইন)
বিশ্লেষণাত্মক সমাধান: $u(x, y) = \exp(-(2x^2 + 4y^2)) + 0.5$
কনফিগারেশন পয়েন্ট: ४५९५ টি, সীমানা পয়েন্ট: ६०० টি

ত্রিমাত্রিক রৈখিক স্থিতিস্থাপক মাইক্রোমেকানিক্স প্রয়োগ

সিন্থেটিক পলিক্রিস্টালাইন মাইক্রোস্ট্রাকচার:
- ঘনক ডোমেইন $\Omega \subset \mathbb{R}^3$ , ভক্সেল রেজোলিউশন: $३२^३$
- Voronoi টেসেলেশন প্রায় १५ টি শস্য উৎপন্ন করে
- প্রতিটি শস্যের এলোমেলো ক্রিস্টাল অভিযোজন (SO(३) এ সমানভাবে বিতরণ করা)
- উপাদান: চতুর্ভুজ TiAl
প্রশিক্ষণ সেট: ५००० স্বাধীন মাইক্রোস্ট্রাকচার বাস্তবায়ন
নেটওয়ার্ক আর্কিটেকচার: ३D অবশিষ্ট কনভোলিউশনাল নিউরাল নেটওয়ার্ক (ResNet)

মূল্যায়ন মেট্রিক্স

আপেক্ষিক L२ ত্রুটি (শতাংশ):

\text{Error} = \frac{\|u_{true} - u_{pred}\|_2}{\|u_{true}\|_2} \times 100\%

ত्रिমাত्रिक প্রয়োগ: গড় আপেক্ষিক ত্রুটি (mean relative error)

শক্তি মেট্রিক্স:

স্পাইকিং কার্যকলাপ শতাংশ (Spiking Activity)
শক্তি অনুপাত $E_r$ (প্রকৃত শক্তি খরচ/१००% সক্রিয়করণ শক্তি খরচ)

তুলনা পদ্ধতি

१. SP-PINN: SP পদ্ধতি ব্যবহার করে ঐতিহ্যবাহী PINN (বেসলাইন) २. SB-NeuroPINN: প্রক্সি গ্রেডিয়েন্ট ব্যবহার করে ক্ষতি গণনা করে NeuroPINN ३. CPINN: রূপান্তর কৌশলের স্পাইকিং PINN (२५६ স্পাইক সময় ধাপ ব্যবহার করে)

বাস্তবায়ন বিবরণ

নেটওয়ার্ক কনফিগারেশন (E-I, E-II): ५ স্তর, २-४०-८०-४०-१, সক্রিয়করণ ফাংশন: tanh
নেটওয়ার্ক কনফিগারেশন (E-III): ५ স্তর, २-४०-८०-४०-१, সক্রিয়করণ ফাংশন: ELU
নেটওয়ার্ক কনফিগারেশন (E-IV): ५ স্তর, २-४०-१२०-४०-१, সক্রিয়করণ ফাংশন: tanh
VSN কনফিগারেশন: প্রথম দুটি সক্রিয়করণ স্তর VSN স্তর দ্বারা প্রতিস্থাপিত
অপ্টিমাইজার: Adam
স্পাইক সময় ধাপ (STS): ডিফল্ট १ টি (NeuroPINN), २५६ টি (CPINN)
ইনপুট এনকোডিং: সরাসরি ইনপুট (হার বা সময় এনকোডিং প্রয়োজন নেই)

পরীক্ষামূলক ফলাফল

প্রধান ফলাফল

টেবিল २: বিভিন্ন মডেলের আপেক্ষিক L२ ত্রুটি (%)

মডেল	E-I (Burgers)	E-II (Heat)	E-III (L-shape)	E-IV (Star)
SP-PINN	0.25	0.46	3.67	0.26
NeuroPINN	1.04	1.27	2.70	0.34
SB-NeuroPINN	6.70	1.96	DNC*	0.87
CPINN	11.87	13.75	DNC*	13.06

*DNC = সংযোগ করা হয়নি (Did Not Converge)

মূল আবিষ্কার: १. NeuroPINN vs SP-PINN: ত্রুটি কাছাকাছি (E-I: १.०४% vs ०.२५%), E-III-তে SP-PINN-এর চেয়ে উন্নত (२.७०% vs ३.६७%) २. NeuroPINN vs SB-NeuroPINN: ক্ষতি গণনার জন্য প্রক্সি গ্রেডিয়েন্ট ব্যবহার করে সংস্করণের চেয়ে উল্লেখযোগ্যভাবে উন্নত, SP পদ্ধতির প্রয়োজনীয়তা যাচাই করে ३. NeuroPINN vs CPINN: রূপান্তর কৌশলের চেয়ে উল্লেখযোগ্যভাবে উন্নত (E-I: १.०४% vs ११.८७%), এবং CPINN অনিয়মিত ডোমেইনে সংযোগ করতে ব্যর্থ ४. অনিয়মিত ডোমেইন কর্মক্ষমতা: NeuroPINN L-আকৃতি এবং তারকা-আকৃতির ডোমেইনে সফলভাবে সংযোগ করে, স্থিতিস্থাপকতা প্রদর্শন করে

শক্তি দক্ষতা বিশ্লেষণ

চিত্র ६: স্পাইকিং কার্যকলাপ শতাংশ

বিভিন্ন উদাহরণে দুটি VSN স্তরের স্পাইকিং কার্যকলাপ:

উদাহরণ	স্তর L१	স্তর L२	শক্তি অনুপাত $E_r$
E-I	~६०%	~५५%	०.५८
E-II	~७०%	~४५%	०.५२
E-III	~४५%	~३५%	०.४२
E-IV	~३५%	~२५%	०.२९

সিদ্ধান্ত:

সমস্ত উদাহরণে স্পাইকিং কার্যকলাপ १००% এর নিচে অনেক দূরে
E-IV প্রায় ७०% শক্তি সঞ্চয় (সিন্যাপ্টিক অপারেশন) অর্জন করে
নিউরোমরফিক হার্ডওয়্যারে প্রকৃত স্থাপনা আরও উল্লেখযোগ্য সঞ্চয় প্রদান করবে

মাল্টি-স্পাইক টাইম স্টেপ (STS) পরীক্ষা

টেবিল ३: २ টি STS ব্যবহার করে কর্মক্ষমতা

উদাহরণ	ত্রুটি(%)	SA-L१ সংগৃহীত	SA-L२ সংগৃহীত
E-I	०.४९	0.50	0.72
E-II	१.०६	0.70	0.55
E-III	२.६७	0.38	0.27
E-IV	०.२२	0.35	0.14

আবিষ্কার:

२ টি STS ব্যবহার করে আরও ত্রুটি হ্রাস (E-I: १.०४%→०.४९%)
সংগৃহীত স্পাইকিং কার্যকলাপ এখনও १००% এর নিচে অনেক দূরে
মাল্টি-STS নির্ভুলতা বৃদ্ধি করার সময় শক্তি দক্ষতা বজায় রাখতে পারে প্রমাণ করে

ত্রিমাত্রিক মাইক্রোমেকানিক্স প্রয়োগ

von-Mises সমতুল্য চাপ পূর্বাভাস

মডেল	গড় আপেক্ষিক ত্রুটি(%)	স্পাইকিং কার্যকলাপ
ঐতিহ্যবাহী আর্কিটেকচার	1.68	-
NeuroPINN	3.43	<२१% (१०/१२ স্তর)

পর্যবেক্ষণ:

NeuroPINN জটিল ত্রিমাত্রিক সমস্যায় যুক্তিসঙ্গত নির্ভুলতা বজায় রাখে
१२ টি স্পাইকিং স্তরের মধ্যে १० টির স্পাইকিং কার্যকলাপ <२१%
বাস্তব বৈজ্ঞানিক গণনায় প্রয়োগের সম্ভাবনা প্রদর্শন করে

অপসারণ পরীক্ষা

SP পদ্ধতি vs প্রক্সি গ্রেডিয়েন্ট

SB-NeuroPINN এবং NeuroPINN-এর তুলনার মাধ্যমে (টেবিল २):

E-I-তে, SB-NeuroPINN ত্রুটি ६.७०% এ বৃদ্ধি পায় (NeuroPINN: १.०४%)
E-III-তে, SB-NeuroPINN সংযোগ করতে ব্যর্থ
সিদ্ধান্ত: SP পদ্ধতি ভৌত নির্ভুলতা বজায় রাখার জন্য অপরিহার্য

নেটিভ প্রশিক্ষণ vs রূপান্তর কৌশল

CPINN তুলনার মাধ্যমে:

CPINN २५६ টি STS প্রয়োজন, NeuroPINN মাত্র १-२ টি
CPINN অনিয়মিত ডোমেইনে ব্যর্থ
সিদ্ধান্ত: নেটিভ প্রশিক্ষণ আরও দক্ষ এবং শক্তিশালী

কেস বিশ্লেষণ

চিত্র २-५ বিভিন্ন পদ্ধতির পূর্বাভাস এবং পরম ত্রুটি প্রদর্শন করে:

NeuroPINN পূর্বাভাস: সত্য মূল্যের সাথে অত্যন্ত সামঞ্জস্যপূর্ণ, ত্রুটি বিতরণ সমান
SB-NeuroPINN: জটিল অঞ্চলে স্পষ্ট বিচ্যুতি
CPINN: উল্লেখযোগ্যভাবে বৃহত্তর ত্রুটি, স্থানিক বিতরণ অসমান

উপসংহার এবং আলোচনা

প্রধান সিদ্ধান্ত

१. কার্যকারিতা যাচাইকরণ: NeuroPINN চারটি PDE বেঞ্চমার্ক এবং ত্রিমাত্রিক বাস্তব প্রয়োগে ভাল কর্মক্ষমতা প্রদর্শন করে

२. শক্তি দক্ষতা: বিরল স্পাইক যোগাযোগের মাধ্যমে প্রায় ५०-७०% সিন্যাপ্টিক অপারেশন শক্তি সঞ্চয় অর্জন করা

३. পদ্ধতি উৎকর্ষতা:

ক্ষতি গণনার জন্য প্রক্সি গ্রেডিয়েন্ট ব্যবহার করে SB-NeuroPINN-এর চেয়ে উন্নত
রূপান্তর কৌশলের CPINN-এর চেয়ে উল্লেখযোগ্যভাবে উন্নত
অনিয়মিত ডোমেইনে স্থিতিস্থাপকতা প্রদর্শন করে

४. মাল্টি-STS লাভ: একাধিক স্পাইক সময় ধাপ ব্যবহার করে নির্ভুলতা আরও উন্নত করা যায়, শক্তি দক্ষতা বজায় রেখে

५. নেটিভ প্রশিক্ষণ সুবিধা: রূপান্তর কৌশলের চেয়ে সরাসরি স্পাইকিং ডোমেইনে প্রশিক্ষণ আরও নির্ভরযোগ্য

সীমাবদ্ধতা

१. নির্ভুলতা সামান্য হ্রাস: ঐতিহ্যবাহী SP-PINN-এর তুলনায়, NeuroPINN-এর ত্রুটি সামান্য বেশি (কিন্তু পার্থক্য ছোট)

२. ত্রিমাত্রিক প্রয়োগ নির্ভুলতা: জটিল ত্রিমাত্রিক সমস্যায়, ত্রুটি १.६८% থেকে ३.४३% বৃদ্ধি পায়

३. VSN শক্তি খরচ: স্তরযুক্ত স্পাইকের শক্তি দক্ষতা বাইনারি LIF নিউরনের চেয়ে কম (কিন্তু এখনও ঐতিহ্যবাহী নিউরনের চেয়ে উন্নত)

४. প্রতিবেশী পয়েন্ট চাহিদা: SP পদ্ধতি অতিরিক্ত প্রতিবেশী পয়েন্ট গণনা প্রয়োজন, নমুনা জটিলতা বৃদ্ধি করে

५. প্রশিক্ষণ অ্যালগরিদম: এখনও প্যারামিটার আপডেটের জন্য প্রক্সি গ্রেডিয়েন্টের উপর নির্ভর করে, ভবিষ্যতে SNN-এর জন্য আরও উপযুক্ত প্রশিক্ষণ পদ্ধতি অন্বেষণ করা যায়

६. হার্ডওয়্যার যাচাইকরণ অনুপস্থিত: প্রকৃত নিউরোমরফিক হার্ডওয়্যার (যেমন Loihi २) এ পরীক্ষা করা হয়নি

ভবিষ্যত দিকনির্দেশনা

१. উন্নত প্রশিক্ষণ অ্যালগরিদম: সম্পূর্ণ প্রক্সি গ্রেডিয়েন্ট-মুক্ত প্রশিক্ষণ পদ্ধতি বিকাশ করা

२. হার্ডওয়্যার স্থাপনা: Loihi २ ইত্যাদি নিউরোমরফিক চিপে বাস্তবায়ন এবং পরীক্ষা করা

३. প্রয়োগ সম্প্রসারণ: আরও জটিল PDE সিস্টেম অন্বেষণ (যেমন Navier-Stokes সমীকরণ)

४. স্বয়ংক্রিয় STS: নির্ভুলতা এবং দক্ষতার ভারসাম্য রাখতে গতিশীলভাবে স্পাইক সময় ধাপ সংখ্যা সামঞ্জস্য করা

५. তাত্ত্বিক বিশ্লেষণ: সংযোগ এবং ত্রুটি সীমার তাত্ত্বিক গ্যারান্টি প্রদান করা

গভীর মূল্যায়ন

সুবিধা

१. উদ্ভাবনী

প্রথম নেটিভ একীকরণ: VSN-কে PINN-এ নেটিভভাবে একীভূত করার প্রথম কাজ
চতুর দ্বৈত গ্রেডিয়েন্ট কৌশল: SP পদ্ধতি ভৌত নির্ভুলতা নিশ্চিত করে, প্রক্সি গ্রেডিয়েন্ট প্রশিক্ষণযোগ্যতা নিশ্চিত করে
শক্তিশালী তাত্ত্বিক ভিত্তি: SP পদ্ধতি আপস্কেলিং তত্ত্ব থেকে উদ্ভূত, শক্তিশালী গাণিতিক ভিত্তি রয়েছে

२. পরীক্ষা পর্যাপ্ততা

বৈচিত্র্যময় পরীক্ষা: সময়-নির্ভর, স্থির-অবস্থা, নিয়মিত ডোমেইন, অনিয়মিত ডোমেইন অন্তর্ভুক্ত
ব্যাপক তুলনা: একাধিক বেসলাইন পদ্ধতির সাথে তুলনা, অপসারণ পরীক্ষা অন্তর্ভুক্ত
শক্তি বিশ্লেষণ: বিস্তারিত স্পাইকিং কার্যকলাপ এবং শক্তি অনুমান প্রদান করা
বাস্তব প্রয়োগ: ত্রিমাত্রিক মাইক্রোমেকানিক্স কেস ব্যবহারিক মূল্য প্রদর্শন করে

३. ফলাফল প্রভাবশীলতা

সামঞ্জস্যপূর্ণ সুবিধা: সমস্ত পরীক্ষায় CPINN-এর চেয়ে উন্নত
স্থিতিস্থাপকতা: অনিয়মিত ডোমেইনে সফল (প্রতিযোগী পদ্ধতি ব্যর্থ)
পরিমাণগত শক্তি সঞ্চয়: নির্দিষ্ট শক্তি অনুপাত ডেটা প্রদান করা

४. লেখার গুণমান

স্পষ্ট কাঠামো: পদ্ধতি, পরীক্ষা, বিশ্লেষণ যুক্তিসঙ্গত সংযোগ
গাণিতিক কঠোরতা: সূত্র ডেরিভেশন বিস্তারিত, প্রতীক সংজ্ঞা স্পষ্ট
ভাল ভিজ্যুয়ালাইজেশন: চার্ট ফলাফল স্বজ্ঞাত প্রদর্শন করে

অপূর্ণতা

१. পদ্ধতি সীমাবদ্ধতা

নির্ভুলতা ত্যাগ: শক্তি দক্ষতার জন্য নির্দিষ্ট নির্ভুলতা খরচ (যদিও ছোট)
প্রতিবেশী নির্ভরতা: SP পদ্ধতি অতিরিক্ত প্রতিবেশী পয়েন্ট প্রয়োজন, কনফিগারেশন পয়েন্ট নমুনা জটিলতা বৃদ্ধি করে
VSN নির্বাচন: অন্যান্য নতুন স্পাইকিং নিউরনের চেয়ে VSN কেন উন্নত তা পর্যাপ্তভাবে যুক্তি দেওয়া হয়নি

२. পরীক্ষা ত্রুটি

হার্ডওয়্যার যাচাইকরণ অনুপস্থিত: শক্তি সঞ্চয় শুধুমাত্র তাত্ত্বিক অনুমান, প্রকৃত নিউরোমরফিক হার্ডওয়্যারে পরীক্ষা করা হয়নি
হাইপারপ্যারামিটার সংবেদনশীলতা: VSN থ্রেশহোল্ড, ফুটো ফ্যাক্টর ইত্যাদির প্রতি সংবেদনশীলতা বিশ্লেষণ করা হয়নি
স্কেলেবিলিটি: বৃহত্তর স্কেল বা উচ্চতর মাত্রার সমস্যা পরীক্ষা করা হয়নি
CPINN সুর অপর্যাপ্ত: লেখকরা স্বীকার করেন CPINN আরও ভাল ক্যালিব্রেশনের মাধ্যমে কর্মক্ষমতা উন্নত করতে পারে

३. বিশ্লেষণ অপর্যাপ্ততা

সংযোগ বিশ্লেষণ: তাত্ত্বিক সংযোগ গ্যারান্টি অনুপস্থিত
ত্রুটি উৎস: ত্রুটি বৃদ্ধির নির্দিষ্ট কারণ গভীরভাবে বিশ্লেষণ করা হয়নি
SP পদ্ধতি ওভারহেড: SP পদ্ধতির অতিরিক্ত গণনা খরচ পরিমাণ করা হয়নি
LIF তুলনা: LIF ব্যর্থতা উল্লেখ করা হয়েছে কিন্তু বিস্তারিত ফলাফল প্রদর্শন করা হয়নি

४. পুনরুৎপাদনযোগ্যতা

কোড ওপেন সোর্স নয়: পেপার কোড লিঙ্ক প্রদান করে না
বাস্তবায়ন বিবরণ: কিছু প্রশিক্ষণ বিবরণ (যেমন শেখার হার সময়সূচী, প্রাথমিক থামা কৌশল) উল্লেখ করা হয়নি
এলোমেলোতা নিয়ন্ত্রণ: এলোমেলো বীজ সেটিং উল্লেখ করা হয়নি

প্রভাব

१. ক্ষেত্রে অবদান

অগ্রগামী কাজ: শক্তি-দক্ষ বৈজ্ঞানিক মেশিন লার্নিংয়ের জন্য নতুন দিকনির্দেশনা খোলে
পদ্ধতিগত অবদান: SP পদ্ধতি এবং স্পাইকিং নিউরাল নেটওয়ার্কের সমন্বয় সর্বজনীন প্রযোজ্যতা রয়েছে
সেতু ভূমিকা: নিউরোমরফিক কম্পিউটিং এবং বৈজ্ঞানিক গণনা দুটি ক্ষেত্র সংযুক্ত করে

२. ব্যবহারিক মূল্য

এজ কম্পিউটিং: মোবাইল ডিভাইস এবং IoT পরিস্থিতির জন্য উপযুক্ত
রিয়েল-টাইম প্রয়োগ: কম বিলম্ব ইভেন্ট-চালিত গণনা
টেকসই AI: শক্তি খরচ হ্রাস সবুজ AI প্রবণতার সাথে সামঞ্জস্যপূর্ণ

३. সম্ভাব্য প্রভাব

পরবর্তী গবেষণা অনুপ্রেরণা: আরও স্পাইকিং PINN ভেরিয়েন্ট ট্রিগার করতে পারে
হার্ডওয়্যার চালনা: নিউরোমরফিক হার্ডওয়্যারের জন্য বাস্তব প্রয়োগ প্রদান করে
আন্তঃবিষয়ক সংমিশ্রণ: নিউরোসায়েন্স এবং কম্পিউটেশনাল ফিজিক্সের ক্রস-ডিসিপ্লিনারি প্রচার করে

প্রযোজ্য পরিস্থিতি

আদর্শ পরিস্থিতি

१. সম্পদ-সীমিত পরিবেশ: এম্বেডেড সিস্টেম, এজ ডিভাইস, মোবাইল প্ল্যাটফর্ম २. রিয়েল-টাইম PDE সমাধান: দ্রুত প্রতিক্রিয়া প্রয়োজন এমন নিয়ন্ত্রণ সিস্টেম ३. বড় স্কেল সমান্তরাল গণনা: নিউরোমরফিক চিপ অ্যারেতে স্থাপনযোগ্য ४. মধ্যম নির্ভুলতা চাহিদা: १-३% ত্রুটি সহ্য করতে পারে এমন প্রয়োগ

অপ্রযোজ্য পরিস্থিতি

१. অত্যন্ত উচ্চ নির্ভুলতা প্রয়োজন: যেমন বিমান চলাচল শিল্পে গুরুত্বপূর্ণ গণনা २. ঐতিহ্যবাহী হার্ডওয়্যার পর্যাপ্ত: পর্যাপ্ত GPU/CPU সম্পদ থাকলে, ঐতিহ্যবাহী PINN আরও সহজ ३. অতি-বড় স্কেল সমস্যা: স্কেলেবিলিটি এখনও পর্যাপ্তভাবে যাচাই করা হয়নি ४. অ-রিগ্রেশন কাজ: পদ্ধতি PDE সমাধানের জন্য ডিজাইন করা হয়েছে

প্রযুক্তিগত হাইলাইট

१. দ্বৈত গ্রেডিয়েন্ট বিচ্ছেদ: ভৌত গ্রেডিয়েন্ট গণনা এবং প্যারামিটার গ্রেডিয়েন্ট গণনা আলাদা করা, নির্ভুলতা এবং প্রশিক্ষণযোগ্যতা উভয় যত্ন নেওয়া

२. স্তরযুক্ত স্পাইক প্রক্রিয়া: VSN-এর অ-বাইনারি আউটপুট বিরলতা এবং প্রকাশ ক্ষমতার মধ্যে ভারসাম্য অর্জন করে

३. রূপান্তর-মুক্ত প্রশিক্ষণ: রূপান্তর কৌশলের অনুমান ত্রুটি এবং দীর্ঘ স্পাইক সিকোয়েন্স প্রয়োজন এড়ায়

४. তাত্ত্বিক সমর্থন: SP পদ্ধতি স্টোকাস্টিক ডিফারেনশিয়াল সমীকরণ তত্ত্বের শক্তিশালী ভিত্তি রয়েছে

সামগ্রিক মূল্যায়ন

এটি একটি উদ্ভাবনী এবং পরীক্ষা-নিরীক্ষা দৃঢ় কাজ যা সফলভাবে স্পাইকিং নিউরাল নেটওয়ার্ক ফিজিক্স ইনফর্মড নিউরাল নেটওয়ার্ক ক্ষেত্রে প্রবর্তন করে। মূল অবদান নেটিভ প্রশিক্ষণ প্যারাডাইম এবং দ্বৈত গ্রেডিয়েন্ট গণনা কৌশল প্রস্তাব করা, স্পাইকিং নিউরনের অসংততা এবং PDE সমাধানের মসৃণতা প্রয়োজনের মধ্যে দ্বন্দ্ব কার্যকরভাবে সমাধান করা। পরীক্ষার ফলাফল যুক্তিসঙ্গত নির্ভুলতা বজায় রেখে উল্লেখযোগ্য শক্তি সঞ্চয় অর্জনের সম্ভাবনা প্রদর্শন করে।

প্রধান সুবিধা পদ্ধতির কঠোরতা এবং পরীক্ষার ব্যাপকতা, বিশেষত অনিয়মিত ডোমেইনে স্থিতিস্থাপকতা প্রদর্শন। প্রধান অপূর্ণতা প্রকৃত হার্ডওয়্যার যাচাইকরণ এবং তাত্ত্বিক সংযোগ বিশ্লেষণের অভাব। সামগ্রিকভাবে, এটি একটি শক্তি-দক্ষ বৈজ্ঞানিক গণনা উন্নয়ন চালনা করার সম্ভাবনা রাখে গুরুত্বপূর্ণ কাজ, নিউরোমরফিক হার্ডওয়্যারে বৈজ্ঞানিক ক্ষেত্রের প্রয়োগের জন্য শক্তিশালী প্রদর্শন প্রদান করে। ভবিষ্যত কাজ হার্ডওয়্যার স্থাপনা এবং স্কেলেবিলিটি যাচাইকরণে ফোকাস করার সুপারিশ করা হয়।