2025-11-12T13:52:10.754709

Physics-Informed High-order Graph Dynamics Identification Learning for Predicting Complex Networks Long-term Dynamics

Wang, Wang, Xue
Learning complex network dynamics is fundamental to understanding, modelling and controlling real-world complex systems. There are two main problems in the task of predicting the dynamic evolution of complex networks: on the one hand, existing methods usually use simple graphs to describe the relationships in complex networks; however, this approach can only capture pairwise relationships, while there may be rich non-pairwise structured relationships in the network. First-order GNNs have difficulty in capturing dynamic non-pairwise relationships. On the other hand, theoretical prediction models lack accuracy and data-driven prediction models lack interpretability. To address the above problems, this paper proposes a higher-order network dynamics identification method for long-term dynamic prediction of complex networks. Firstly, to address the problem that traditional graph machine learning can only deal with pairwise relations, dynamic hypergraph learning is introduced to capture the higher-order non-pairwise relations among complex networks and improve the accuracy of complex network modelling. Then, a dual-driven dynamic prediction module for physical data is proposed. The Koopman operator theory is introduced to transform the nonlinear dynamical differential equations for the dynamic evolution of complex networks into linear systems for solving. Meanwhile, the physical information neural differential equation method is utilised to ensure that the dynamic evolution conforms to the physical laws. The dual-drive dynamic prediction module ensures both accuracy and interpretability of the prediction. Validated on public datasets and self-built industrial chain network datasets, the experimental results show that the method in this paper has good prediction accuracy and long-term prediction performance.
academic

Apprentissage d'Identification de Dynamiques de Graphes d'Ordre Supérieur Informé par la Physique pour la Prédiction de la Dynamique à Long Terme des Réseaux Complexes

Informations Fondamentales

  • ID de l'article: 2510.09082
  • Titre: Physics-Informed High-order Graph Dynamics Identification Learning for Predicting Complex Networks Long-term Dynamics
  • Auteurs: Bicheng Wang, Junping Wang, Yibo Xue (Institut d'Automatisation, Académie Chinoise des Sciences)
  • Classification: cs.AI cs.CY cs.SI physics.soc-ph
  • Date de publication: Octobre 2025 (Prépublication ArXiv)
  • Lien de l'article: https://arxiv.org/abs/2510.09082

Résumé

Cet article propose une méthode d'apprentissage d'identification de dynamiques de graphes d'ordre supérieur informée par la physique (PhyHSL) pour prédire l'évolution dynamique à long terme des réseaux complexes. La méthode capture les relations non-appariées d'ordre supérieur dans le réseau en introduisant un apprentissage d'hypergraphes dynamiques, et construit un module de prédiction à double moteur en combinant la théorie de l'opérateur de Koopman et les équations différentielles neurales informées par la physique, améliorant ainsi l'interprétabilité du modèle tout en garantissant la précision des prédictions. L'efficacité de la méthode a été validée par des expériences sur des ensembles de données publics et des ensembles de données de réseaux de chaînes d'approvisionnement construits en interne.

Contexte de Recherche et Motivation

Problèmes Fondamentaux

La prédiction de dynamiques de réseaux complexes fait face à deux défis majeurs:

  1. Limitations de la modélisation relationnelle: Les méthodes existantes utilisent généralement des graphes simples pour décrire les relations réseau, ne pouvant capturer que les relations appariées, alors que les réseaux complexes contiennent des relations structurelles non-appariées riches (telles que la collaboration multi-entreprises dans les chaînes d'approvisionnement, les structures de réseaux routiers dans les réseaux de transport).
  2. Équilibre entre précision et interprétabilité du modèle de prédiction: Les modèles de prédiction théoriques manquent de précision, les modèles pilotés par les données manquent d'interprétabilité, et l'accumulation d'erreurs se produit facilement dans les prédictions à long terme.

Importance de la Recherche

L'apprentissage de dynamiques de réseaux complexes est crucial pour comprendre, modéliser et contrôler les systèmes complexes du monde réel, impliquant de nombreux domaines tels que les réseaux cérébraux, les réseaux sociaux et les réseaux d'approvisionnement. La prédiction précise de l'évolution du réseau aide à analyser la résilience intrinsèque du réseau et à prédire les états futurs.

Limitations des Méthodes Existantes

  • Restrictions des GNN du premier ordre: Les réseaux de neurones graphiques traditionnels ont du mal à capturer les relations non-appariées dynamiques
  • Dépendance des méthodes d'hypergraphes: Les méthodes d'hypergraphes existantes dépendent largement de structures prédéfinies, incapables de s'adapter aux caractéristiques d'évolution des réseaux dynamiques
  • Absence de contraintes physiques: Les méthodes purement pilotées par les données manquent de contraintes de mécanismes physiques, et les résultats de prédiction s'écartent facilement de la trajectoire d'évolution réelle du système

Contributions Fondamentales

  1. Module d'apprentissage de structure d'hypergraphes dynamiques: Dépasse les limitations des hypergraphes traditionnels qui dépendent de structures prédéfinies, générant dynamiquement des hyper-arêtes adaptatives par décomposition de matrices de faible rang et convolution d'hypergraphes, réalisant la modélisation en ligne des interactions non-appariées.
  2. Module de prédiction à double moteur physique-données:
    • Introduit la théorie de l'opérateur de Koopman pour convertir les équations différentielles dynamiques non-linéaires en systèmes linéaires résolus
    • Utilise les ODE neurales informées par la physique pour assurer que l'évolution dynamique respecte les lois physiques
    • Optimise conjointement par le cadre d'inférence variationnelle, renforçant la robustesse du modèle
  3. Cadre complet de dynamiques de réseaux d'ordre supérieur: Fusionnant les lois physiques et la modélisation de structures graphiques pilotées par les données, construisant un paradigme d'optimisation conjointe pour la prédiction de dynamiques à long terme des réseaux complexes.
  4. Validation expérimentale: Validation de la précision de prédiction et des performances de généralisation de la méthode sur des ensembles de données publics et des ensembles de données de réseaux de chaînes d'approvisionnement construits en interne.

Explication Détaillée de la Méthode

Définition de la Tâche

Étant donné une séquence d'observations historiques d'un réseau complexe, prédire l'évolution dynamique future du réseau. L'entrée est une séquence de caractéristiques de nœuds et une structure réseau, la sortie est la prédiction d'état des nœuds aux moments futurs.

Architecture du Modèle

1. Encodeur de Capture de Relations de Domaine

Construction d'un graphe temporel contenant des arêtes spatiales et temporelles:

  • Arêtes spatiales: Arêtes pondérées entre objets au même horodatage
  • Arêtes temporelles: Arêtes pondérées entre observations consécutives de chaque objet

Matrice d'adjacence définie comme:

A(it, jt') = {
    w^t_ij,  si t' = t
    1,       si i = j, t' = t+1  
    0,       sinon
}

Convolution spatiale du premier ordre: Combinant le mécanisme d'attention pour apprendre adaptivement les informations de voisinage

s^(k)(it, jt') = A(it, jt') cos(W_query h^{t,(k)}_i, W_key h^{t',(k)}_j)
h^{t,(k+1)}_i = h^{t,(k)}_i + σ(∑_{jt'∈N_it} s^(k)(it, jt') W_value h^{t',(k)}_j)

Convolution spectrale du second ordre: Utilisant les polynômes de Chebyshev pour explorer les informations sémantiques non-voisines

C^(k) = ∑^2_{m=0} T_m(L̃)C^{(k-1)}W^(k)_m

2. Apprentissage de Structure d'Hypergraphes Dynamiques (DHSL)

Génération dynamique d'hyper-arêtes par décomposition de matrices de faible rang:

Λ = UW_Λ

où U est l'empilement de représentations d'état de nœuds, W est une matrice de poids apprenable.

Processus de convolution d'hypergraphes:

E = σ(W_E Λ^T U) + Λ^T U  (plongement d'hyper-arêtes)
F_i = ΛE = Λ(σ(W_E Λ^T U) + Λ^T U)  (mise à jour du plongement de nœuds)

3. Apprentissage de Dynamiques Réseau

Module piloté par la physique:

  • Génération d'état initial par inférence variationnelle: q(z^0_i|X,A) = N(MLP_m(f_i), MLP_v(f_i))
  • Utilisation d'un solveur ODE neuronal pour calculer l'état futur: (z^1_i, z^2_i, ..., z^{T+1}_i) = ODESolver(z^0_i, g, [t=0,...,T])

Module piloté par les données: Basé sur la théorie de l'opérateur de Koopman, mappant le système non-linéaire à un espace linéaire:

K ∘ g(x_t) = g(F(x_t)) = g(x_{t+1})
(z̃^0_i, z̃^1_i, ..., z̃^{T+1}_i) = (f^0_i, Kf^0_i, Kf^1_i, ..., Kf^T_i)

Prédiction fusionnée:

x̂^t_i = MLP(σ([z^t_i, z̃^t_i]))

Points d'Innovation Technique

  1. Génération d'hypergraphes dynamiques: Sans structure prédéfinie, générant adaptivement des hyper-arêtes par états de nœuds
  2. Combinaison de contraintes physiques et linéarisation: L'opérateur de Koopman fournit une représentation linéarisée globale, les ODE neurales assurent la cohérence physique
  3. Cadre d'optimisation conjointe: Modules à double moteur entraînés conjointement sous le cadre d'inférence variationnelle

Configuration Expérimentale

Ensembles de Données

Ensembles de données publics:

  • Social (pages Facebook): 3892 nœuds, 17239 arêtes
  • Web (liens EPA): 4252 nœuds, 8896 arêtes
  • WS (réseau Watts-Strogatz): 5000 nœuds, 10000 arêtes

Ensemble de données de chaîne d'approvisionnement construit en interne:

  • Manufacture: 960 nœuds, 25142 arêtes
  • Electronic: 700 nœuds, 16604 arêtes
  • Finance: 1500 nœuds, 61218 arêtes

Métriques d'Évaluation

Utilisation de l'erreur absolue moyenne (MAE):

MAE = (1/N) ∑^N_{i=1} ||x̂_i - x_i||

Méthodes de Comparaison

  • Méthodes GNN: DCRNN, MTGODE, DiskNet
  • Méthodes d'hypergraphes: HGC-RNN, MSHyper
  • Méthodes PINN: PhyCRNet, PINNsFormer, PhysicsSolver

Détails d'Implémentation

  • Cadre: PyTorch
  • Matériel: 2 GPU NVIDIA A100
  • Expériences répétées 10 fois, résultats moyennés
  • Optimisation: Cadre d'inférence variationnelle, minimisation de la perte ELBO

Résultats Expérimentaux

Résultats Principaux

PhyHSL atteint les résultats optimaux ou quasi-optimaux sur les 6 ensembles de données:

Performance sur ensembles de données publics:

  • Social: 0.201±0.007 (optimal)
  • Web: 0.178±0.014 (optimal)
  • WS: 0.127±0.007 (optimal)

Performance sur ensembles de données de chaîne d'approvisionnement:

  • Manufacture: 0.112±0.014 (optimal)
  • Electronic: 0.247±0.013 (optimal)
  • Finance: 0.162±0.027 (quasi-optimal)

Amélioration moyenne d'environ 10% par rapport aux meilleures méthodes de base, avec des avantages encore plus marqués sur les réseaux de chaînes d'approvisionnement complexes.

Études d'Ablation

Les études d'ablation sur les ensembles de données Social et Manufacture montrent:

  • Suppression du module piloté par la physique: baisse de performance (0.231 vs 0.201)
  • Suppression du module Koopman: baisse de performance (0.233 vs 0.201)
  • Suppression du module d'hypergraphes: impact plus significatif sur les réseaux complexes
  • Suppression simultanée du double moteur: baisse significative de performance (0.268 vs 0.201)

Analyse de Prédiction à Long Terme

  • Impact de la longueur d'entraînement: La performance de prédiction s'améliore avec l'augmentation de la longueur d'entraînement et tend à se stabiliser
  • Impact de la longueur de prédiction: Dans la prédiction à long terme, l'avantage de PhyHSL par rapport à DiskNet est plus marqué
  • Efficacité de calcul: Efficacité de calcul supérieure par rapport aux méthodes dépendant de Transformer

Découvertes Expérimentales

  1. Les modules à double moteur se complètent mutuellement, chacun étant indispensable
  2. Le module d'hypergraphes joue un rôle plus important dans les réseaux complexes
  3. Les contraintes physiques réduisent efficacement l'accumulation d'erreurs dans les prédictions à long terme
  4. L'opérateur de Koopman réduit le nombre de paramètres apprennables, améliorant l'efficacité de calcul

Travaux Connexes

Prédiction de Dynamiques Réseau

  • Les méthodes précoces basées sur les GNN du premier ordre, comme NCDN combinant pour la première fois les ODE neurales et les GNN
  • MTGODE abstrayant les séries temporelles multivariées en graphes dynamiques
  • DiskNet basé sur l'identification de la structure du groupe de renormalisation dans l'espace hyperbolique

Réseaux de Neurones d'Hypergraphes

  • HGNN première méthode d'apprentissage spatial d'hypergraphes
  • DHGNN premier traitement de la dynamique d'hyper-arêtes
  • Les méthodes existantes dépendent largement de structures prédéfinies ou de similarité de nœuds

Conclusion et Discussion

Conclusions Principales

  1. PhyHSL fusionne efficacement les contraintes physiques et l'apprentissage de structures d'ordre supérieur, améliorant significativement la performance de prédiction de dynamiques à long terme des réseaux complexes
  2. L'apprentissage d'hypergraphes dynamiques capture avec succès les relations non-appariées, le module à double moteur assurant la précision et l'interprétabilité
  3. Démontre une bonne valeur pratique dans les scénarios industriels

Limitations

  1. La complexité du modèle est relativement élevée, nécessitant un équilibre entre performance et coût de calcul
  2. L'applicabilité aux réseaux extrêmement épars ou à très grande échelle reste à vérifier
  3. La conception des contraintes physiques peut nécessiter des connaissances d'experts du domaine

Directions Futures

  1. Explorer la construction de relations de réseaux d'hypergraphes plus complexes
  2. Étudier les méthodes d'apprentissage en ligne pour les mises à jour de structures réseau en temps réel
  3. Développer des technologies de surveillance et de contrôle en temps réel de la résilience réseau

Évaluation Approfondie

Points Forts

  1. Forte innovativité méthodologique: Première combinaison organique de l'opérateur de Koopman, des ODE neurales informées par la physique et de l'apprentissage d'hypergraphes dynamiques
  2. Définition claire du problème: Identification précise des défis fondamentaux de la prédiction de réseaux complexes
  3. Conception expérimentale complète: Couvrant les ensembles de données publics et construits en interne, études d'ablation approfondies
  4. Ligne technique rationnelle: La combinaison de contraintes physiques et de pilotage par les données possède une base théorique solide

Insuffisances

  1. Analyse théorique insuffisante: Absence de garanties théoriques de convergence et de stabilité
  2. Analyse de complexité de calcul manquante: Pas d'analyse détaillée de la complexité fournie
  3. Sensibilité aux hyperparamètres: Discussion insuffisante de l'impact des hyperparamètres clés
  4. Vérification d'interprétabilité: Vérification insuffisante de l'efficacité des contraintes physiques

Impact

  1. Contribution académique: Fournit un nouveau paradigme technologique pour la prédiction de dynamiques de réseaux complexes
  2. Valeur pratique: Démontre un potentiel d'application dans les scénarios industriels tels que les chaînes d'approvisionnement
  3. Reproductibilité: Fournit des détails d'implémentation détaillés, facilitant la reproduction

Scénarios d'Application

  • Prédiction et gestion des risques de réseaux de chaînes d'approvisionnement
  • Modélisation de la propagation d'informations dans les réseaux sociaux
  • Prédiction de flux de trafic dans les réseaux de transport
  • Analyse dynamique de réseaux biologiques
  • Propagation des risques dans les réseaux financiers

Références

L'article cite les travaux importants dans les domaines connexes, notamment:

  • Méthodes fondamentales de réseaux de neurones graphiques (Kipf et al., Veličković et al.)
  • Théorie des ODE neurales (Chen et al.)
  • Théorie de l'opérateur de Koopman (Mezić, Strogatz)
  • Réseaux de neurones d'hypergraphes (Feng et al., Jiang et al.)
  • Réseaux de neurones informés par la physique (Raissi)

Évaluation Globale: Cet article propose un cadre de prédiction de dynamiques de réseaux complexes avec une forte innovativité technique et une haute valeur pratique, avec une conception méthodologique et une vérification expérimentale relativement complètes. Bien qu'il existe des insuffisances dans l'analyse théorique et l'analyse de complexité de calcul, ses contributions techniques et perspectives d'application méritent toujours d'être reconnues.