Learning complex network dynamics is fundamental to understanding, modelling and controlling real-world complex systems. There are two main problems in the task of predicting the dynamic evolution of complex networks: on the one hand, existing methods usually use simple graphs to describe the relationships in complex networks; however, this approach can only capture pairwise relationships, while there may be rich non-pairwise structured relationships in the network. First-order GNNs have difficulty in capturing dynamic non-pairwise relationships. On the other hand, theoretical prediction models lack accuracy and data-driven prediction models lack interpretability. To address the above problems, this paper proposes a higher-order network dynamics identification method for long-term dynamic prediction of complex networks. Firstly, to address the problem that traditional graph machine learning can only deal with pairwise relations, dynamic hypergraph learning is introduced to capture the higher-order non-pairwise relations among complex networks and improve the accuracy of complex network modelling. Then, a dual-driven dynamic prediction module for physical data is proposed. The Koopman operator theory is introduced to transform the nonlinear dynamical differential equations for the dynamic evolution of complex networks into linear systems for solving. Meanwhile, the physical information neural differential equation method is utilised to ensure that the dynamic evolution conforms to the physical laws. The dual-drive dynamic prediction module ensures both accuracy and interpretability of the prediction. Validated on public datasets and self-built industrial chain network datasets, the experimental results show that the method in this paper has good prediction accuracy and long-term prediction performance.
academic
Apprentissage d'Identification de Dynamiques de Graphes d'Ordre Supérieur Informé par la Physique pour la Prédiction de la Dynamique à Long Terme des Réseaux Complexes
Cet article propose une méthode d'apprentissage d'identification de dynamiques de graphes d'ordre supérieur informée par la physique (PhyHSL) pour prédire l'évolution dynamique à long terme des réseaux complexes. La méthode capture les relations non-appariées d'ordre supérieur dans le réseau en introduisant un apprentissage d'hypergraphes dynamiques, et construit un module de prédiction à double moteur en combinant la théorie de l'opérateur de Koopman et les équations différentielles neurales informées par la physique, améliorant ainsi l'interprétabilité du modèle tout en garantissant la précision des prédictions. L'efficacité de la méthode a été validée par des expériences sur des ensembles de données publics et des ensembles de données de réseaux de chaînes d'approvisionnement construits en interne.
La prédiction de dynamiques de réseaux complexes fait face à deux défis majeurs:
Limitations de la modélisation relationnelle: Les méthodes existantes utilisent généralement des graphes simples pour décrire les relations réseau, ne pouvant capturer que les relations appariées, alors que les réseaux complexes contiennent des relations structurelles non-appariées riches (telles que la collaboration multi-entreprises dans les chaînes d'approvisionnement, les structures de réseaux routiers dans les réseaux de transport).
Équilibre entre précision et interprétabilité du modèle de prédiction: Les modèles de prédiction théoriques manquent de précision, les modèles pilotés par les données manquent d'interprétabilité, et l'accumulation d'erreurs se produit facilement dans les prédictions à long terme.
L'apprentissage de dynamiques de réseaux complexes est crucial pour comprendre, modéliser et contrôler les systèmes complexes du monde réel, impliquant de nombreux domaines tels que les réseaux cérébraux, les réseaux sociaux et les réseaux d'approvisionnement. La prédiction précise de l'évolution du réseau aide à analyser la résilience intrinsèque du réseau et à prédire les états futurs.
Restrictions des GNN du premier ordre: Les réseaux de neurones graphiques traditionnels ont du mal à capturer les relations non-appariées dynamiques
Dépendance des méthodes d'hypergraphes: Les méthodes d'hypergraphes existantes dépendent largement de structures prédéfinies, incapables de s'adapter aux caractéristiques d'évolution des réseaux dynamiques
Absence de contraintes physiques: Les méthodes purement pilotées par les données manquent de contraintes de mécanismes physiques, et les résultats de prédiction s'écartent facilement de la trajectoire d'évolution réelle du système
Module d'apprentissage de structure d'hypergraphes dynamiques: Dépasse les limitations des hypergraphes traditionnels qui dépendent de structures prédéfinies, générant dynamiquement des hyper-arêtes adaptatives par décomposition de matrices de faible rang et convolution d'hypergraphes, réalisant la modélisation en ligne des interactions non-appariées.
Module de prédiction à double moteur physique-données:
Introduit la théorie de l'opérateur de Koopman pour convertir les équations différentielles dynamiques non-linéaires en systèmes linéaires résolus
Utilise les ODE neurales informées par la physique pour assurer que l'évolution dynamique respecte les lois physiques
Optimise conjointement par le cadre d'inférence variationnelle, renforçant la robustesse du modèle
Cadre complet de dynamiques de réseaux d'ordre supérieur: Fusionnant les lois physiques et la modélisation de structures graphiques pilotées par les données, construisant un paradigme d'optimisation conjointe pour la prédiction de dynamiques à long terme des réseaux complexes.
Validation expérimentale: Validation de la précision de prédiction et des performances de généralisation de la méthode sur des ensembles de données publics et des ensembles de données de réseaux de chaînes d'approvisionnement construits en interne.
Étant donné une séquence d'observations historiques d'un réseau complexe, prédire l'évolution dynamique future du réseau. L'entrée est une séquence de caractéristiques de nœuds et une structure réseau, la sortie est la prédiction d'état des nœuds aux moments futurs.
Génération d'hypergraphes dynamiques: Sans structure prédéfinie, générant adaptivement des hyper-arêtes par états de nœuds
Combinaison de contraintes physiques et linéarisation: L'opérateur de Koopman fournit une représentation linéarisée globale, les ODE neurales assurent la cohérence physique
Cadre d'optimisation conjointe: Modules à double moteur entraînés conjointement sous le cadre d'inférence variationnelle
PhyHSL atteint les résultats optimaux ou quasi-optimaux sur les 6 ensembles de données:
Performance sur ensembles de données publics:
Social: 0.201±0.007 (optimal)
Web: 0.178±0.014 (optimal)
WS: 0.127±0.007 (optimal)
Performance sur ensembles de données de chaîne d'approvisionnement:
Manufacture: 0.112±0.014 (optimal)
Electronic: 0.247±0.013 (optimal)
Finance: 0.162±0.027 (quasi-optimal)
Amélioration moyenne d'environ 10% par rapport aux meilleures méthodes de base, avec des avantages encore plus marqués sur les réseaux de chaînes d'approvisionnement complexes.
Impact de la longueur d'entraînement: La performance de prédiction s'améliore avec l'augmentation de la longueur d'entraînement et tend à se stabiliser
Impact de la longueur de prédiction: Dans la prédiction à long terme, l'avantage de PhyHSL par rapport à DiskNet est plus marqué
Efficacité de calcul: Efficacité de calcul supérieure par rapport aux méthodes dépendant de Transformer
PhyHSL fusionne efficacement les contraintes physiques et l'apprentissage de structures d'ordre supérieur, améliorant significativement la performance de prédiction de dynamiques à long terme des réseaux complexes
L'apprentissage d'hypergraphes dynamiques capture avec succès les relations non-appariées, le module à double moteur assurant la précision et l'interprétabilité
Démontre une bonne valeur pratique dans les scénarios industriels
Forte innovativité méthodologique: Première combinaison organique de l'opérateur de Koopman, des ODE neurales informées par la physique et de l'apprentissage d'hypergraphes dynamiques
Définition claire du problème: Identification précise des défis fondamentaux de la prédiction de réseaux complexes
Conception expérimentale complète: Couvrant les ensembles de données publics et construits en interne, études d'ablation approfondies
Ligne technique rationnelle: La combinaison de contraintes physiques et de pilotage par les données possède une base théorique solide
L'article cite les travaux importants dans les domaines connexes, notamment:
Méthodes fondamentales de réseaux de neurones graphiques (Kipf et al., Veličković et al.)
Théorie des ODE neurales (Chen et al.)
Théorie de l'opérateur de Koopman (Mezić, Strogatz)
Réseaux de neurones d'hypergraphes (Feng et al., Jiang et al.)
Réseaux de neurones informés par la physique (Raissi)
Évaluation Globale: Cet article propose un cadre de prédiction de dynamiques de réseaux complexes avec une forte innovativité technique et une haute valeur pratique, avec une conception méthodologique et une vérification expérimentale relativement complètes. Bien qu'il existe des insuffisances dans l'analyse théorique et l'analyse de complexité de calcul, ses contributions techniques et perspectives d'application méritent toujours d'être reconnues.