2025-11-25T19:52:17.853069

Evolution of cooperation with the diversity of cooperation tendencies

Huang, Han
The complete cooperation and the complete defection are two typical strategies considered in evolutionary games in many previous works. However, in real life, strategies of individuals are full of variety rather than only two complete ones. In this work, the diversity of strategies is introduced into the weak prisoners' dilemma game, which is measured by the diversity of the cooperation tendency. A higher diversity means more cooperation tendencies are provided. The complete cooperation strategy is the full cooperation tendency and the complete defection strategy is without any cooperation tendency. Agents with other cooperation tendencies behave as partial cooperators and as partial defectors simultaneously. The numerical simulation shows that increasing the diversity of the cooperation tendency promotes the cooperation level, not only the number of cooperators but also the average tendency over the whole population, until the diversity reaches its saturated value. Furthermore, our work points out maintaining cooperation is based on the cooperation efficiency approximating to the reward of cooperators and that the cooperation efficiency oscillates and quickly decreases to zero when cooperator clusters cannot resist the invasion of defectors. When the effect of the noise for the Femi update mechanism is considered, a higher diversity of strategies not only improves the cooperation level of the whole population but also supports the survival of more rational agents.
academic

Évolution de la coopération avec la diversité des tendances de coopération

Informations de base

  • ID de l'article: 2406.12647
  • Titre: Evolution of cooperation with the diversity of cooperation tendencies
  • Auteurs: Linya Huang, Wenchen Han
  • Classification: physics.soc-ph (Physique sociale)
  • Date de publication: 18 juin 2024 (prépublication arXiv)
  • Lien de l'article: https://arxiv.org/abs/2406.12647

Résumé

La théorie classique des jeux évolutionnaires ne considère généralement que deux stratégies extrêmes : la coopération complète et la défection totale. Cependant, dans la réalité, les stratégies individuelles sont beaucoup plus diversifiées. Cette étude introduit la diversité des stratégies dans le dilemme du prisonnier faible en mesurant la diversité des tendances de coopération. Une diversité plus élevée signifie l'offre d'un plus grand nombre d'options de tendances de coopération. La stratégie de coopération complète correspond à une tendance de coopération maximale, tandis que la défection totale correspond à une tendance de coopération nulle. Les autres agents avec des tendances de coopération intermédiaires se comportent simultanément comme des coopérateurs partiels et des défecteurs partiels. Les simulations numériques montrent que l'augmentation de la diversité des tendances de coopération favorise le niveau de coopération, non seulement en augmentant le nombre de coopérateurs, mais aussi en élevant la tendance moyenne de l'ensemble de la population, jusqu'à ce que la diversité atteigne une valeur de saturation. L'étude indique également que le maintien de la coopération dépend de l'efficacité de la coopération qui s'approche de la récompense des coopérateurs. Lorsque les grappes de coopérateurs ne peuvent pas résister à l'invasion des défecteurs, l'efficacité de la coopération oscille et chute rapidement à zéro.

Contexte et motivation de la recherche

Contexte du problème

  1. Limitations de la théorie des jeux classique: La théorie classique des jeux évolutionnaires ne considère généralement que deux stratégies extrêmes : la coopération complète et la défection totale, alors que dans le monde réel, les stratégies comportementales individuelles présentent une continuité et une diversité.
  2. Signification réelle du dilemme du prisonnier: Le dilemme du prisonnier, en tant que modèle classique pour étudier l'évolution de la coopération, a pour équilibre stable la défection mutuelle, ce qui entraîne l'extinction des coopérateurs. Cependant, les comportements coopératifs sont largement présents dans la réalité.
  3. Mécanismes de promotion de la coopération: Les recherches existantes ont identifié cinq mécanismes principaux de promotion de la coopération : la sélection de parenté, la réciprocité directe, la réciprocité indirecte, la réciprocité réseau et la sélection de groupe. Cependant, les recherches sur l'impact de la diversité des stratégies restent insuffisantes.

Motivation de la recherche

  • Importance de l'hétérogénéité des stratégies: Dans le monde réel, les individus ne sont pas parfaitement rationnels et présentent diverses degrés de tendances de coopération
  • Stratégies de coopération partielle: Les individus peuvent posséder simultanément des caractéristiques de coopération et de défection, nécessitant une modélisation plus nuancée
  • Effets réseau: Étudier les mécanismes d'influence de la diversité des stratégies sur l'évolution de la coopération dans les réseaux spatiaux

Contributions principales

  1. Introduction du concept de diversité des tendances de coopération: Intégration de paramètres continus de tendances de coopération dans le dilemme du prisonnier faible, permettant aux agents d'adopter des stratégies de coopération partielle
  2. Établissement d'un nouveau système d'indicateurs d'évaluation: Proposition d'indicateurs tels que la proportion de coopérateurs (fC), la tendance moyenne de coopération (fS) et l'efficacité de la coopération (eC)
  3. Révélation des mécanismes de promotion de la coopération: Découverte que la diversité des stratégies favorise le maintien de la coopération en atténuant les oscillations de l'efficacité de la coopération
  4. Perspectives théoriques: Démonstration que la clé du maintien de la coopération réside dans l'efficacité de la coopération s'approchant de la valeur de récompense des coopérateurs (1)
  5. Analyse des effets du bruit: Étude de l'impact du bruit décisionnel sur l'évolution de la coopération à différents niveaux de diversité des stratégies

Détails méthodologiques

Définition de la tâche

Étude de la dynamique de l'évolution de la coopération dans le dilemme du prisonnier faible au sein d'une population d'agents avec différents niveaux de diversité des tendances de coopération sur un réseau de grille L×L.

Entrées:

  • Structure du réseau (grille 100×100)
  • Paramètre de diversité des tendances de coopération m
  • Paramètre de tentation de défection b∈[1,2)
  • Paramètre de bruit décisionnel κ

Sorties:

  • Proportion de coopérateurs fC
  • Tendance moyenne de coopération fS
  • Efficacité de la coopération eC

Architecture du modèle

1. Configuration du dilemme du prisonnier faible

  • Matrice de gains: Les deux parties coopérant obtiennent une récompense de 1, les deux parties défectant obtiennent une punition de 0, un défecteur face à un coopérateur obtient la tentation b, un coopérateur face à un défecteur obtient 0
  • Structure du réseau: Réseau de grille 100×100 avec conditions aux limites périodiques, degré de chaque nœud k=4

2. Diversité des tendances de coopération

L'ensemble des tendances de coopération est défini comme: S={0,1m,2m,,1}S = \{0, \frac{1}{m}, \frac{2}{m}, \ldots, 1\}

où m est le paramètre de diversité. La tendance de coopération de l'agent i est si, représentant que cet agent est coopérateur à hauteur de si et défecteur à hauteur de (1-si).

3. Calcul des gains

Le gain de l'agent i face à l'agent j est: Πi,j=sisj+(1si)sjb\Pi_{i,j} = s_i \cdot s_j + (1-s_i) \cdot s_j \cdot b

Le gain total est: Πi=jNiΠi,j\Pi_i = \sum_{j \in N_i} \Pi_{i,j}

4. Mécanisme de mise à jour des stratégies

Utilisation de la règle de mise à jour de Fermi. La probabilité que l'agent i adopte la stratégie du voisin j est: W(sjsi)=11+exp[(ΠiΠj)/κ]W(s_j \leftarrow s_i) = \frac{1}{1 + \exp[(\Pi_i - \Pi_j)/\kappa]}

où κ est le paramètre de bruit, représentant le degré de rationalité de l'agent.

Points d'innovation technique

  1. Espace de stratégies continu: Contrairement aux stratégies binaires traditionnelles, introduction de paramètres continus de tendances de coopération
  2. Préservation de la matrice de gains originale: Pas besoin de modifier la structure de gains du dilemme du prisonnier traditionnel
  3. Système d'évaluation multidimensionnel: Considération simultanée du nombre de coopérateurs et de l'intensité de la coopération
  4. Concept d'efficacité de la coopération: Définition de l'efficacité de la coopération eC = ⟨Π⟩/(4fS) comme outil d'analyse clé

Configuration expérimentale

Paramètres

  • Taille du réseau: N = 10 000 agents, grille 100×100
  • Paramètre de diversité: m ∈ {1, 2, 4, 8, 10, 50, 100}
  • Tentation de défection: b ∈ 1,00, 1,14
  • Paramètre de bruit: κ = 0,1 (agents rationnels), κ ∈ 0, 0,3 (analyse du bruit)
  • Pas de temps: 50 000 pas de transition + 1 000 pas de statistiques
  • Répétitions: 50 conditions initiales aléatoires

Indicateurs d'évaluation

  1. Proportion de coopérateurs: fC={jsj>0}Nf_C = \frac{|\{j|s_j > 0\}|}{N}
  2. Tendance moyenne de coopération: fS=jsjNf_S = \frac{\sum_j s_j}{N}
  3. Efficacité de la coopération: eC=Π4fSe_C = \frac{⟨\Pi⟩}{4f_S}
  4. Tendance moyenne des coopérateurs: fS/fC

Résultats expérimentaux

Résultats principaux

1. La diversité des stratégies favorise la coopération

  • Lorsque m=1 (stratégies binaires traditionnelles), tous les agents choisissent la défection lorsque b>1,02
  • Lorsque m≥2, les coopérateurs peuvent survivre à des niveaux plus élevés de tentation de défection (b≈1,13)
  • Une diversité m plus élevée soutient la population pour atteindre des niveaux de coopération globale plus élevés

2. Choix optimal des tendances de coopération

  • Les agents tendent à choisir des stratégies proches de la « tendance de coopération saturée »
  • À des niveaux de tentation modérés, les stratégies de coopération partielle (comme s=0,5, s=0,75) deviennent dominantes
  • Lorsque la diversité augmente, la tendance moyenne des coopérateurs fS/fC tend à converger

3. Rôle clé de l'efficacité de la coopération

  • La clé du maintien de la coopération réside dans l'efficacité de la coopération eC s'approchant de 1 (récompense des coopérateurs)
  • Lorsque les grappes de coopérateurs ne peuvent pas résister à l'invasion des défecteurs, eC oscille violemment et chute rapidement à 0
  • La diversité des stratégies favorise la stabilité de la coopération en atténuant les oscillations de eC

Expériences d'ablation

Analyse des effets du bruit

  • Une diversité de stratégies plus élevée élargit la plage de bruit pour la survie de la coopération
  • Lorsque m=1, b=1,04, les coopérateurs s'éteignent complètement, indépendamment du degré de rationalité
  • Lorsque m=8, même à une tentation élevée de b=1,42, les coopérateurs peuvent survivre
  • Les coopérateurs qui survivent nécessitent un degré de rationalité plus élevé pour distinguer les tendances de coopération similaires

Analyse de cas

L'analyse par instantanés (figure 2) révèle les modèles de distribution des stratégies sous différents paramètres:

  • Tentation faible (b=1,01): Préférence pour la coopération complète s=1
  • Tentation modérée (b=1,02-1,03): Stratégies mixtes ou coopération partielle dominante
  • Tentation élevée (b=1,07): Seules les stratégies de faible tendance de coopération peuvent survivre

Découvertes expérimentales

  1. Effet de saturation: Existence d'un niveau optimal de tendance de coopération, au-delà duquel l'augmentation de la diversité a un effet limité
  2. Équilibre dynamique: La stabilité de l'efficacité de la coopération autour de 1 est une condition nécessaire pour le maintien de la coopération
  3. Exigences de rationalité: L'augmentation de la diversité des stratégies impose des exigences plus élevées au degré de rationalité des agents

Travaux connexes

Mécanismes d'évolution de la coopération

  • Cinq mécanismes classiques: Sélection de parenté, réciprocité directe, réciprocité indirecte, réciprocité réseau, sélection de groupe
  • Mécanismes systémiques: Réputation, récompense et punition, hétérogénéité des agents

Recherches sur l'hétérogénéité des stratégies

  • Hétérogénéité des investissements: Yuan et al. associent l'investissement individuel au niveau de coopération local
  • Hétérogénéité de connectivité: Cao et al. associent l'investissement à la proportion de connectivité individuelle
  • Hétérogénéité de réputation: Yan et al. proposent un mécanisme d'évolution de la réputation hétérogène
  • Stratégies quasi-coopératives: Chen et al. définissent des stratégies quasi-coopératives permettant l'altruisme incomplet

Avantages de cet article

  • Préservation de la structure de gains originale du dilemme du prisonnier
  • Introduction d'un espace de stratégies continu plutôt qu'une troisième stratégie discrète
  • Fourniture d'un cadre d'analyse théorique systématique

Conclusions et discussion

Conclusions principales

  1. La diversité des stratégies favorise significativement la coopération: L'augmentation de la diversité des tendances de coopération élève le niveau de coopération, permettant à la coopération de se maintenir sous une tentation de défection plus élevée
  2. L'efficacité de la coopération est le mécanisme clé: Le maintien de la coopération dépend de l'efficacité de la coopération s'approchant de 1, la diversité agissant en atténuant les oscillations de l'efficacité
  3. Existence d'un seuil de saturation: L'effet de promotion de la coopération tend à saturer après avoir atteint un certain niveau de diversité
  4. Exigences de degré de rationalité: Une diversité plus élevée nécessite que les agents possèdent un degré de rationalité plus élevé pour distinguer efficacement les stratégies

Limitations

  1. Restrictions de structure réseau: Seuls les réseaux de grille réguliers ont été considérés, sans exploration de l'impact d'autres topologies réseau
  2. Mécanisme de mise à jour unique: Seule la règle de mise à jour de Fermi a été utilisée, d'autres mécanismes d'apprentissage pourraient produire des résultats différents
  3. Plage de paramètres: La plage de paramètres du dilemme du prisonnier faible est relativement limitée
  4. Analyse théorique insuffisante: Manque de dérivations mathématiques rigoureuses

Directions futures

  1. Extension de topologie réseau: Étude des effets sur les réseaux complexes sans échelle, les réseaux petit-monde, etc.
  2. Réseaux multicouches: Considération de l'évolution de la coopération dans les réseaux de relations multiples
  3. Réseaux adaptatifs: Permettre à la structure du réseau de s'ajuster dynamiquement avec l'évolution des stratégies
  4. Modélisation théorique: Développement de théories analytiques pour prédire les points critiques et les comportements de transition de phase

Évaluation approfondie

Points forts

  1. Innovation conceptuelle: Le concept de diversité des tendances de coopération est novateur, offrant une nouvelle perspective pour l'étude de l'hétérogénéité des stratégies
  2. Méthode concise: Introduction d'un espace de stratégies continu tout en préservant la structure de jeu originale, conception ingénieuse
  3. Analyse complète: Analyse systématique de l'évolution de la coopération sous plusieurs dimensions (proportion de coopérateurs, tendance moyenne, efficacité de la coopération)
  4. Révélation des mécanismes: Révélation du mécanisme profond du maintien de la coopération par l'évolution dynamique de l'efficacité de la coopération
  5. Expériences suffisantes: Balayage de paramètres complet, analyse statistique fiable

Insuffisances

  1. Profondeur théorique: Manque d'analyse mathématique rigoureuse, dépendance principale aux simulations numériques
  2. Simplification du modèle: Structure réseau et mécanisme de mise à jour relativement simples, écart important avec les systèmes réels
  3. Explication des mécanismes: L'explication du mécanisme par lequel la diversité des stratégies atténue les oscillations de l'efficacité de la coopération n'est pas suffisamment approfondie
  4. Universalité: L'universalité des conclusions nécessite une vérification sur plus de types de jeux et de structures réseau

Impact

  1. Contribution théorique: Fourniture d'un nouveau cadre de modélisation pour la recherche sur l'hétérogénéité des stratégies en théorie des jeux évolutionnaires
  2. Valeur appliquée: Orientation pour la compréhension des comportements coopératifs dans les sociétés réelles
  3. Inspiration méthodologique: La méthode de traitement continu des tendances de coopération peut être généralisée à d'autres modèles de jeux
  4. Signification interdisciplinaire: Valeur de référence pour la recherche sur la coopération en sociologie, économie, biologie et autres domaines

Scénarios applicables

  1. Coopération sociale: Analyse de l'interaction entre individus avec différents degrés de coopération dans les groupes sociaux
  2. Comportement économique: Étude des stratégies de coopération partielle des entreprises sur le marché
  3. Écosystèmes: Modélisation des relations coopération-compétition dans les populations biologiques
  4. Communautés en ligne: Analyse de la participation et du comportement contributif des utilisateurs dans les communautés réseau

Références

L'article cite 51 références connexes, couvrant les fondamentaux de la théorie des jeux, les mécanismes d'évolution de la coopération, la science des réseaux et d'autres domaines, fournissant une base théorique solide pour la recherche. Particulièrement dignes d'attention sont les travaux classiques de Nowak sur les cinq règles de l'évolution de la coopération, ainsi que les recherches de pointe récentes sur l'hétérogénéité des stratégies.