2025-11-14T20:07:10.813497

D3MAS: Decompose, Deduce, and Distribute for Enhanced Knowledge Sharing in Multi-Agent Systems

Zhang, Shi, Gu et al.
Multi-agent systems powered by large language models exhibit strong capabilities in collaborative problem-solving. However, these systems suffer from substantial knowledge redundancy. Agents duplicate efforts in retrieval and reasoning processes. This inefficiency stems from a deeper issue: current architectures lack mechanisms to ensure agents share minimal sufficient information at each operational stage. Empirical analysis reveals an average knowledge duplication rate of 47.3\% across agent communications. We propose D3MAS (Decompose, Deduce, and Distribute), a hierarchical coordination framework addressing redundancy through structural design rather than explicit optimization. The framework organizes collaboration across three coordinated layers. Task decomposition filters irrelevant sub-problems early. Collaborative reasoning captures complementary inference paths across agents. Distributed memory provides access to non-redundant knowledge. These layers coordinate through structured message passing in a unified heterogeneous graph. This cross-layer alignment ensures information remains aligned with actual task needs. Experiments on four challenging datasets show that D3MAS consistently improves reasoning accuracy by 8.7\% to 15.6\% and reduces knowledge redundancy by 46\% on average.
academic

D3MAS : Décomposer, Déduire et Distribuer pour un Partage de Connaissances Amélioré dans les Systèmes Multi-Agents

Informations Fondamentales

  • ID de l'article : 2510.10585
  • Titre : D3MAS: Decompose, Deduce, and Distribute for Enhanced Knowledge Sharing in Multi-Agent Systems
  • Auteurs : Heng Zhang, Yuling Shi, Xiaodong Gu, Haochen You, Zijian Zhang, Lubin Gan, Yilei Yuan, Jin Huang
  • Classification : cs.GR (Infographie)
  • Date de publication : 12 octobre 2025
  • Lien de l'article : https://arxiv.org/abs/2510.10585v1

Résumé

Les systèmes multi-agents basés sur les grands modèles de langage démontrent des capacités puissantes en résolution collaborative de problèmes, mais ces systèmes souffrent d'un problème grave de redondance des connaissances. Les agents effectuent un travail répété lors de la récupération et du raisonnement, avec un taux de redondance des connaissances moyen atteignant 47,3 %. Cette inefficacité provient d'un problème plus profond : l'architecture actuelle manque de mécanismes garantissant que les agents partagent les informations minimales nécessaires à chaque étape opérationnelle. Cet article propose le cadre D3MAS (Décomposer, Déduire, Distribuer), qui résout le problème de redondance par une conception structurée plutôt que par une optimisation explicite. Le cadre organise la collaboration en trois couches de coordination : la couche de décomposition des tâches filtre les sous-problèmes non pertinents, la couche de raisonnement collaboratif capture les chemins de raisonnement complémentaires entre agents, et la couche de mémoire distribuée fournit un accès aux connaissances sans redondance. Ces couches sont coordonnées par un passage de messages structuré unifié dans un graphe hétérogène, garantissant que les informations restent alignées avec les besoins réels des tâches. Les expériences sur quatre ensembles de données difficiles montrent que D3MAS améliore la précision du raisonnement de 8,7 % à 15,6 % et réduit en moyenne la redondance des connaissances de 46 %.

Contexte de Recherche et Motivation

Définition du Problème

Le problème fondamental que cette recherche vise à résoudre est celui de la redondance des connaissances dans les systèmes multi-agents. Elle se manifeste concrètement par :

  1. Redondance de récupération : plusieurs agents récupèrent indépendamment des connaissances identiques ou chevauchantes
  2. Redondance de raisonnement : les agents poursuivent des chemins de raisonnement sémantiquement similaires
  3. Redondance de tâches : chevauchement dans l'allocation des sous-tâches

Importance du Problème

Le problème de redondance des connaissances affecte gravement l'efficacité et les performances des systèmes multi-agents :

  • L'analyse empirique révèle un taux de répétition moyen des connaissances de 47,3 % dans la communication entre agents
  • Cela entraîne un gaspillage des ressources informatiques et une diminution de l'efficacité collaborative
  • Cela entrave l'application efficace des systèmes multi-agents aux tâches complexes

Limitations des Approches Existantes

Les méthodes actuelles de collaboration multi-agents présentent les problèmes suivants :

  1. Architecture fragmentée : la coordination des tâches, l'exécution du raisonnement et la récupération de mémoire sont considérées comme des composants indépendants
  2. Manque de synchronisation inter-couches : les décisions de chaque couche manquent du contexte des autres couches
  3. Optimisation insuffisante du flux d'information : incapacité à filtrer et aligner systématiquement les informations

Motivation de la Recherche

D'un point de vue théorique de l'information, une collaboration efficace nécessite de garantir que les informations échangées entre agents à chaque étape opérationnelle soient minimales et suffisantes. Cet article propose de réaliser implicitement l'optimisation de l'information par une conception structurée, plutôt que par un calcul explicite d'objectifs théoriques de l'information.

Contributions Principales

  1. Identification d'un problème clé : première analyse systématique du problème de manque de coordination hiérarchique dans les systèmes multi-agents, révélant un taux de répétition des connaissances de 47,3 %
  2. Proposition du cadre D3MAS : cadre unifié de collaboration multi-agents basé sur une architecture de graphe hétérogène, réduisant significativement la redondance par la modélisation explicite des dépendances
  3. Amélioration des performances : réalisation d'une amélioration de la précision de 8,7 % à 15,6 % sur plusieurs tests de référence difficiles, tout en réduisant en moyenne la redondance des connaissances de 46 %

Détails de la Méthode

Définition de la Tâche

Le système de raisonnement multi-agents est défini comme S = {A₁, A₂, ..., Aₙ}, où chaque agent Aᵢ possède un processus de raisonnement indépendant et une base de connaissances Kᵢ. Étant donné une requête complexe q, le système produit une réponse synthétisée a par raisonnement collaboratif.

Architecture du Modèle

Conception du Cadre Global

D3MAS construit un graphe hétérogène unifié G_D3MAS pour organiser la collaboration multi-agents, contenant trois types de nœuds :

Ensemble des types de nœuds :

  • T_v = {T_task, T_reason, T_memory}

Ensemble des types d'arêtes :

  • T_e = {e_decompose, e_trigger, e_depend, e_retrieve, e_ground, e_relate}

1. Couche Decompose : Décomposition des Tâches

Construit un graphe de tâches G⁽⁰⁾ = (V⁽⁰⁾, E⁽⁰⁾), où les nœuds représentent les sous-problèmes dérivés de la requête originale q.

Processus de décomposition :

V⁽⁰⁾ = {v_root} ∪ ⋃ⱼ₌₁ᵐ {vⱼ⁽⁰⁾ | vⱼ⁽⁰⁾ = Create(tⱼ), tⱼ ∈ LLM_decomp(v_parent)}

Allocation des tâches :

Assign(vⱼ⁽⁰⁾) = arg max_{Aᵢ∈S} Capability(Aᵢ, vⱼ⁽⁰⁾)

2. Couche Deduce : Raisonnement Collaboratif

Maintient un graphe de raisonnement G⁽¹⁾ = (V⁽¹⁾, E⁽¹⁾), où les nœuds représentent les étapes de raisonnement de différents agents.

Génération de nœuds de raisonnement :

vᵢ,ₖ⁽¹⁾ = LLM_Aᵢ(Concat(c_{vₖ⁽⁰⁾}, C_Aᵢ))

Construction d'arêtes de dépendance :

E_depend = {(vᵢ,ₖ⁽¹⁾, vⱼ,ₗ⁽¹⁾) | Premise(vᵢ,ₖ⁽¹⁾) ∩ Conclusion(vⱼ,ₗ⁽¹⁾) ≠ ∅}

3. Couche Distribute : Mémoire Distribuée

Organise un graphe de connaissances G⁽²⁾ = (V⁽²⁾, E⁽²⁾), où les nœuds représentent les entités et les concepts.

Évaluation de la pertinence :

Score(vₗ⁽²⁾, q_mem) = (h_{vₗ} · f_embed(q_mem)) / (‖h_{vₗ}‖ · ‖f_embed(q_mem)‖)

Récupération distribuée :

M_retrieve = Top-k(⋃ᵢ₌₁ⁿ {v ∈ Gᵢ⁽²⁾ | Score(v, q_mem) > θ})

Passage de Messages Hiérarchisé

Le flux d'information inter-couches est réalisé par un passage de messages sensible aux types :

h_v⁽ᵗ⁺¹⁾ = UPDATE(φ(v))(h_v⁽ᵗ⁾, ⊕_{u∈N(v)} MSG(ψ(u,v))(h_u⁽ᵗ⁾))

Le passage de messages alterne entre les phases ascendantes et descendantes, réalisant un alignement continu.

Points d'Innovation Technique

  1. Réduction structurée de la redondance : modélisation explicite des relations de dépendance par graphe hétérogène, évitant le travail répété
  2. Mécanisme de coordination inter-couches : le flux d'information bidirectionnel entre les trois couches garantit que les décisions sont basées sur le contexte global
  3. Partage d'informations minimales et suffisantes : réalisation implicite de l'optimisation théorique de l'information par conception structurée

Configuration Expérimentale

Ensembles de Données

Utilisation de quatre tests de référence publics diversifiés :

  1. MMLU : questions à choix multiples dans 57 disciplines, testant le raisonnement logique et les connaissances générales
  2. HumanEval : 164 problèmes de programmation écrits à la main, testant la capacité de génération de code
  3. CommonGen : génération de texte avec contraintes, évaluant le raisonnement de sens commun
  4. ARC-Challenge : problèmes de sciences élémentaires, nécessitant un raisonnement avancé

Métriques d'Évaluation

  • Précision : métrique principale pour tous les tests de référence
  • Dimensions MAgIC : Judge, Reason, Decept, Self-Aware, Compre, Coord, Rational
  • Taux de redondance : mesure composite de la redondance de mémoire, de raisonnement et de tâches

Méthodes de Comparaison

Incluent les méthodes mono-agent (CoT, CoT-SC, Reflexion, etc.) et multi-agents (AutoGen, MetaGPT, MACNET, etc.).

Détails d'Implémentation

  • Utilisation de GPT-4 comme générateur de langage
  • BGE-M3 pour le calcul des plongements de texte
  • Dimension d'plongement d=512, nombre de couches de passage de messages L=3
  • Seuil de récupération θ=0,65, top-k=5

Résultats Expérimentaux

Résultats Principaux

D3MAS surpasse significativement les méthodes de base sur tous les tests de référence :

Ensemble de DonnéesD3MASMeilleure BaseAmélioration
MMLU85,3 %68,8 % (MACNET)+16,5 %
HumanEval89,8 %72,6 % (AgentVerse)+17,2 %
SRDD86,2 %80,5 % (MACNET)+5,7 %
CommonGen76,8 %68,9 % (Reconcile)+7,9 %

Études d'Ablation

Analyse de la contribution de chaque composant :

Composant SuppriméBaisse de Précision MMLUBaisse de Précision HumanEval
Couche de Tâches-7,1 %-8,3 %
Couche de Raisonnement-12,7 %-13,4 %
Couche de Mémoire-8,5 %-10,5 %
Passage de Messages-15,9 %-16,0 %
Architecture Plate-21,2 %-21,1 %

Effet de Réduction de la Redondance

  • Réduction moyenne de la redondance de 46 %
  • Réduction la plus significative de la redondance de mémoire
  • Amélioration de l'efficacité informatique de 5 à 8 fois

Sensibilité aux Hyperparamètres

  • Valeur optimale de top-k : 5
  • Seuil de similarité optimal : 0,65
  • Nombre optimal d'agents : 6
  • Dimension d'plongement optimale : 512

Travaux Connexes

Collaboration d'Agents LLM

Les recherches existantes incluent les méthodes pilotées par l'interaction, les cadres de dialogue, les stratégies d'attribution de rôles, etc., mais souffrent généralement de problèmes d'efficacité.

Systèmes Multi-Agents à Structure Graphique

Les travaux antérieurs utilisent implicitement des graphes, tandis que les recherches récentes définissent explicitement les structures graphiques, mais manquent de conception de topologie sensible aux tâches.

Avantages de Cet Article

Par rapport aux travaux connexes, D3MAS fournit une organisation hiérarchisée et la capacité d'ajustement dynamique de la topologie sensible aux tâches.

Conclusion et Discussion

Conclusions Principales

  1. D3MAS résout efficacement le problème de redondance des connaissances dans les systèmes multi-agents par coordination hiérarchisée
  2. La conception structurée est plus appropriée que l'optimisation explicite pour réaliser le partage d'informations minimales et suffisantes
  3. L'alignement inter-couches est la clé pour réduire la redondance globale du système

Limitations

  1. Les expériences actuelles sont principalement basées sur GPT-4, nécessitant une vérification de la généralisation à d'autres modèles
  2. Les stratégies d'extension pour les populations d'agents à très grande échelle nécessitent une recherche supplémentaire
  3. L'adaptabilité aux tâches dynamiques en temps réel doit être améliorée

Directions Futures

L'article propose d'explorer les stratégies d'extension pour les populations d'agents à grande échelle, ce qui constitue une direction de recherche importante.

Évaluation Approfondie

Points Forts

  1. Définition claire du problème : première quantification systématique du problème de redondance des connaissances dans les systèmes multi-agents
  2. Forte innovativité de la méthode : l'architecture de graphe hétérogène et le mécanisme de coordination hiérarchisée possèdent une originalité marquée
  3. Expériences complètes : comparaison exhaustive sur plusieurs ensembles de données et bases de référence, résultats convaincants
  4. Fondations théoriques solides : l'analyse théorique basée sur la théorie de l'information fournit une base solide pour la conception de la méthode

Insuffisances

  1. Analyse de complexité informatique manquante : absence d'analyse détaillée de la complexité temporelle et spatiale du cadre
  2. Considérations insuffisantes pour le déploiement réel : manque d'analyse de faisabilité pour le déploiement dans des environnements réels
  3. Mécanisme de propagation d'erreurs : discussion insuffisante de l'impact de la propagation d'erreurs inter-couches et des stratégies d'atténuation

Impact

  1. Contribution académique : fournit un nouveau paradigme de recherche pour le domaine de la collaboration multi-agents
  2. Valeur pratique : perspectives d'application larges dans la génération de code, le raisonnement scientifique et d'autres domaines
  3. Reproductibilité : fournit des détails d'implémentation détaillés, facilitant la reproduction et l'extension

Scénarios d'Application

D3MAS est particulièrement adapté à :

  1. Les tâches multi-étapes nécessitant un raisonnement complexe
  2. La résolution de problèmes intensifs en connaissances
  3. Le développement et le débogage collaboratifs de code
  4. Les tâches de recherche et d'analyse scientifiques

Références Bibliographiques

L'article cite 69 références connexes, couvrant plusieurs domaines tels que les systèmes multi-agents, les réseaux de neurones graphiques et les grands modèles de langage, fournissant une base théorique solide pour la recherche.


Évaluation Globale : Ceci est un article de recherche de haute qualité qui propose une solution innovante dans le domaine des systèmes multi-agents. L'article définit clairement le problème, conçoit raisonnablement la méthode et valide suffisamment les expériences, possédant une valeur académique et pratique importante.