A framework for the use of generative modelling in non-equilibrium statistical mechanics
Friston, Ramstead, Sakthivadivel
We discuss an approach to mathematically modelling systems made of objects that are coupled together, using generative models of the dependence relationships between states (or trajectories) of the things comprising such systems. This broad class includes open or non-equilibrium systems and is especially relevant to self-organising systems. The ensuing variational free energy principle (FEP) has certain advantages over using random dynamical systems explicitly, notably, by being more tractable and offering a parsimonious explanation of why the joint system evolves in the way that it does, based on the properties of the coupling between system components. The FEP is a method whose use allows us to build a model of the dynamics of an object as if it were a process of variational inference, because variational free energy (or surprisal) is a Lyapunov function for its dynamics. In short, we argue that using generative models to represent and track relations amongst subsystems leads us to a particular statistical theory of interacting systems. Conversely, this theory enables us to construct nested models that respect the known relations amongst subsystems. We point out that the fact that a physical object conforms to the FEP does not necessarily imply that this object performs inference in the literal sense; rather, it is a useful explanatory fiction which replaces the `explicit' dynamics of the object with an `implicit' flow on free energy gradients -- a fiction that may or may not be entertained by the object itself.
academic
गैर-संतुलन सांख्यिकीय यांत्रिकी में जनरेटिव मॉडलिंग के उपयोग के लिए एक ढांचा
यह पेपर युग्मित प्रणालियों के गणितीय मॉडलिंग के लिए जनरेटिव मॉडल का उपयोग करने की एक विधि पर चर्चा करता है, जो जनरेटिव मॉडल के माध्यम से प्रणाली के घटकों के बीच अवस्था (या प्रक्षेपवक्र) की निर्भरता का वर्णन करता है। इस तरह की प्रणालियों में खुली प्रणालियां या गैर-संतुलन प्रणालियां शामिल हैं, विशेष रूप से आत्म-संगठित प्रणालियों के लिए उपयुक्त। परिणामी परिवर्तनशील मुक्त ऊर्जा सिद्धांत (FEP) स्पष्ट रूप से यादृच्छिक गतिशील प्रणालियों का उपयोग करने की तुलना में कुछ लाभ प्रदान करता है, विशेष रूप से अधिक सुगम होना और प्रणाली घटकों के बीच युग्मन की प्रकृति के आधार पर संयुक्त प्रणाली के विकास के तरीके का सरल व्याख्या प्रदान करना। FEP हमें वस्तुओं की गतिशीलता को परिवर्तनशील अनुमान प्रक्रिया के रूप में मॉडल करने की अनुमति देता है, क्योंकि परिवर्तनशील मुक्त ऊर्जा (या आश्चर्य) इसकी गतिशीलता का लायपुनोव फलन है।
यह अनुसंधान युग्मित भौतिक प्रणालियों, विशेष रूप से उन प्रणालियों को प्रभावी ढंग से मॉडल करने की समस्या को हल करने का लक्ष्य रखता है जो आत्म-संगठन और अनुकूलन व्यवहार प्रदर्शित करती हैं। पारंपरिक यादृच्छिक गतिशील प्रणाली दृष्टिकोण जटिल युग्मित संबंधों को संभालते समय अक्सर गणितीय कठिनाइयों का सामना करता है।
सैद्धांतिक महत्व: सांख्यिकीय यांत्रिकी के लिए एक नया मॉडलिंग प्रतिमान प्रदान करता है, भौतिक प्रणालियों की गतिशीलता को सूचना सिद्धांत में अनुमान प्रक्रिया से जोड़ता है
व्यावहारिक मूल्य: जैविक प्रणालियों के आत्म-संगठन, कोशिका आकृति विज्ञान जैसी जटिल घटनाओं को समझने के लिए गणितीय उपकरण प्रदान करता है
अंतःविषय प्रभाव: भौतिकी, सूचना सिद्धांत, संज्ञानात्मक विज्ञान आदि कई क्षेत्रों को जोड़ता है
सैद्धांतिक ढांचा: परिवर्तनशील मुक्त ऊर्जा सिद्धांत के आधार पर एक एकीकृत मॉडलिंग ढांचा प्रस्तावित करता है, जो भौतिक प्रणाली की गतिशीलता को परिवर्तनशील अनुमान प्रक्रिया के रूप में वर्णित करता है
गणितीय उपकरण: यादृच्छिक अवकल समीकरणों से मुक्त ऊर्जा ढाल प्रवाह तक गणितीय मानचित्रण संबंध स्थापित करता है
दार्शनिक स्पष्टीकरण: "मानचित्र" (वैज्ञानिक मॉडल) और "क्षेत्र" (वास्तविक भौतिक प्रणाली) को स्पष्ट रूप से अलग करता है, मॉडल मूर्तिकरण के दार्शनिक जाल से बचता है
अनुभवजन्य सत्यापन: कोशिका आकृति विज्ञान और आवधिक निर्वहन कोशिकाओं के सिमुलेशन के माध्यम से सिद्धांत की प्रभावशीलता को सत्यापित करता है
एक कण को विचार करें जिसकी अवस्था μ है और एक पर्यावरण जिसकी अवस्था η है, जो चर B (मान b के साथ) के माध्यम से युग्मित हैं, एक स्थिर-अवस्था घनत्व p(η,b,μ) मौजूद है जिससे μ, B दिए जाने पर η से सशर्त स्वतंत्र है। B को प्रणाली का मार्कोव कंबल कहा जाता है, जिसमें आमतौर पर संवेदनशील अवस्थाएं और सक्रिय अवस्थाएं शामिल होती हैं।
यह पेपर समृद्ध अंतःविषय साहित्य का हवाला देता है, जिसमें शामिल हैं:
Friston आदि द्वारा मुक्त ऊर्जा सिद्धांत पर प्रारंभिक कार्य
Pearl द्वारा मार्कोव कंबल के ग्राफ मॉडल सिद्धांत
Seifert आदि का यादृच्छिक ऊष्मागतिकी सिद्धांत
Jaynes द्वारा सांख्यिकीय यांत्रिकी पर सूचना-सैद्धांतिक दृष्टिकोण
Wittgenstein की दार्शनिक कृति "लॉजिको-फिलोसोफिकस ट्रैक्टस"
सारांश: यह एक महत्वपूर्ण सैद्धांतिक मूल्य वाला अंतःविषय पेपर है, जो भौतिकी और सूचना सिद्धांत को सफलतापूर्वक जोड़ता है, जटिल प्रणाली मॉडलिंग के लिए एक नई प्रतिमान प्रदान करता है। यद्यपि प्रायोगिक सत्यापन के पहलू में अभी और सुधार की आवश्यकता है, लेकिन इसकी सैद्धांतिक नवाचार और दार्शनिक गहराई इसे इस क्षेत्र का एक महत्वपूर्ण योगदान बनाती है।