2025-11-16T23:37:13.075377

The Algorithmic Regulator

Ruffini
The regulator theorem states that, under certain conditions, any optimal controller must embody a model of the system it regulates, grounding the idea that controllers embed, explicitly or implicitly, internal models of the controlled. This principle underpins neuroscience and predictive brain theories like the Free-Energy Principle or Kolmogorov/Algorithmic Agent theory. However, the theorem is only proven in limited settings. Here, we treat the deterministic, closed, coupled world-regulator system $(W,R)$ as a single self-delimiting program $p$ via a constant-size wrapper that produces the world output string~$x$ fed to the regulator. We analyze regulation from the viewpoint of the algorithmic complexity of the output, $K(x)$. We define $R$ to be a \emph{good algorithmic regulator} if it \emph{reduces} the algorithmic complexity of the readout relative to a null (unregulated) baseline $\varnothing$, i.e., \[ Δ= K\big(O_{W,\varnothing}\big) - K\big(O_{W,R}\big) > 0. \] We then prove that the larger $Δ$ is, the more world-regulator pairs with high mutual algorithmic information are favored. More precisely, a complexity gap $Δ> 0$ yields \[ \Pr\big((W,R)\mid x\big) \le C\,2^{\,M(W{:}R)}\,2^{-Δ}, \] making low $M(W{:}R)$ exponentially unlikely as $Δ$ grows. This is an AIT version of the idea that ``the regulator contains a model of the world.'' The framework is distribution-free, applies to individual sequences, and complements the Internal Model Principle. Beyond this necessity claim, the same coding-theorem calculus singles out a \emph{canonical scalar objective} and implicates a \emph{planner}. On the realized episode, a regulator behaves \emph{as if} it minimized the conditional description length of the readout.
academic

Le Régulateur Algorithmique

Informations Fondamentales

  • ID de l'article: 2510.10300
  • Titre: Le Régulateur Algorithmique
  • Auteur: Giulio Ruffini
  • Classification: cs.CC cs.AI cs.IT cs.SY eess.SY math.IT q-bio.NC
  • Date de publication: 14 octobre 2025 (prépublication arXiv)
  • Lien de l'article: https://arxiv.org/abs/2510.10300

Résumé

Cet article réexamine le théorème classique du régulateur à partir de la théorie algorithmique de l'information (TAI), qui stipule que dans certaines conditions, tout contrôleur optimal doit contenir un modèle du système qu'il régule. L'auteur considère le système d'accouplement monde-régulateur déterministe (W,R)(W,R) comme un programme auto-délimité unique, analysant la régulation sous l'angle de la complexité algorithmique K(x)K(x) de la sortie. Un « bon régulateur algorithmique » est défini comme un régulateur qui réduit la complexité algorithmique de la sortie par rapport à la ligne de base sans régulation, c'est-à-dire Δ=K(OW,)K(OW,R)>0\Delta = K(O_{W,\varnothing}) - K(O_{W,R}) > 0. L'article démontre que plus l'écart de complexité Δ\Delta est grand, plus les paires monde-régulateur présentant une information algorithmique mutuelle élevée sont favorisées, rendant ainsi exponentiellement impossible un faible M(W:R)M(W:R) avec la croissance de Δ\Delta.

Contexte et Motivation de la Recherche

Contexte du Problème

  1. Limitations du théorème classique du régulateur: Le théorème du bon régulateur (GRT) proposé par Conant et Ashby (1970) affirme que « tout bon régulateur d'un système doit être un modèle de ce système », mais ce théorème est trop général dans ses définitions de « modèle » et de « bon », et sa preuve manque de rigueur.
  2. Restrictions du principe du modèle interne: Bien que le principe du modèle interne (PMI) en théorie du contrôle moderne soit rigoureux, il s'applique principalement aux systèmes linéaires invariants dans le temps (SLIT), et son extension aux systèmes non linéaires nécessite des hypothèses structurelles supplémentaires.
  3. Besoins théoriques en neurosciences: Les théories du cerveau prédictif telles que le principe de l'énergie libre et la théorie des agents de Kolmogorov/algorithmique nécessitent une base théorique plus universelle pour soutenir l'idée que « l'agent doit contenir un modèle du monde ».

Motivation de la Recherche

L'auteur vise à:

  • Fournir une théorie de la régulation indépendante de la distribution, applicable aux séquences individuelles
  • Surmonter les limitations des hypothèses linéaires et des modèles probabilistes
  • Établir un théorème du régulateur dans le cadre de la théorie algorithmique de l'information
  • Fournir une base théorique plus rigoureuse pour les neurosciences et les sciences cognitives

Contributions Principales

  1. Proposition d'un cadre de régulateur algorithmique: Redéfinition des critères de « qualité » du régulateur basée sur la théorie algorithmique de l'information, en utilisant la compressibilité de la sortie comme critère d'évaluation
  2. Établissement de trois théorèmes principaux:
    • Théorème de forme postérieure: Distribution postérieure du programme étant donné la sortie observée x
    • Théorème du régulateur contrastif: Preuve de la relation exponentielle entre l'écart de complexité et l'information algorithmique mutuelle
    • Théorème d'inférence de la fonction objectif: Identification de la fonction objectif scalaire canonique
  3. Fourniture d'une théorie indépendante de la distribution: Ne dépendant pas d'hypothèses de distribution probabiliste, applicable aux séquences de réalisation unique
  4. Complément au principe du modèle interne: Complète les conditions structurelles nécessaires du PMI au niveau de la théorie de l'information

Détails Méthodologiques

Définition de la Tâche

Étude du système d'accouplement monde-régulateur déterministe (W,R)(W,R), où:

  • WW: Programme du monde (machine de Turing à 3 bandes)
  • RR: Programme du régulateur (machine de Turing à 3 bandes)
  • NN: Plage de temps fixe
  • x=OW,R(N)x = O^{(N)}_{W,R}: Sortie du monde avec régulateur activé
  • y=OW,(N)y = O^{(N)}_{W,\varnothing}: Sortie du monde avec régulateur désactivé

Définitions Fondamentales

Définition du « Modèle Interne » Algorithmique

Étant donné une plage fixe NN, si M(W:R)>0M(W:R) > 0 (équivalent à K(WR)<K(W)K(W|R) < K(W)), alors RR est dit contenir un modèle interne de WW au sens algorithmique.

Définition du Bon Régulateur Algorithmique

Définition de l'écart de complexité: Δ:=K(OW,(N))K(OW,R(N))\Delta := K(O^{(N)}_{W,\varnothing}) - K(O^{(N)}_{W,R})

Si Δ>0\Delta > 0, alors RR est appelé bon régulateur algorithmique de WW sur la plage NN.

Théorèmes Principaux

Théorème 3.1: Forme Postérieure du Programme

P((W,R)x)[1c~2,1c~1]2K(x)K(W,R)<1c~2M(W:R)P((W,R)|x) \in \left[\frac{1}{\tilde{c}_2}, \frac{1}{\tilde{c}_1}\right] \cdot 2^{K(x)-K(W,R)} < \frac{1}{\tilde{c}} 2^{M(W:R)}

Théorème 3.2: Théorème du Régulateur Probabiliste

Soit Δ:=K(OW,(N))K(OW,R(N))\Delta := K(O^{(N)}_{W,\varnothing}) - K(O^{(N)}_{W,R}), alors il existe une constante C>0C > 0 telle que: P((W,R)OW,R(N),EbR)C2M(W:R)2ΔP((W,R)|O^{(N)}_{W,R}, E^R_b) \leq C \cdot 2^{M(W:R)} 2^{-\Delta}

Cela signifie que pour chaque bit de réduction de M(W:R)M(W:R), le support postérieur perd environ un facteur de 212^{-1}.

Théorème 3.3: Inférence de la Fonction Objectif

Sous la mesure de priorité universelle: log2m(OW,R(N))m(OW,(N))=K(OW,(N))K(OW,R(N))±O(1)\log_2 \frac{m(O^{(N)}_{W,R})}{m(O^{(N)}_{W,\varnothing})} = K(O^{(N)}_{W,\varnothing}) - K(O^{(N)}_{W,R}) \pm O(1)

C'est-à-dire que sur l'épisode réalisé, le régulateur se comporte comme s'il minimisait K(OW,R(N))K(O^{(N)}_{W,R}).

Points d'Innovation Technique

  1. Régulation sous la perspective de la compression: Définition de la régulation comme le processus de rendre la sortie plus compressible, reliant la théorie du contrôle et la théorie de l'information
  2. Analyse contrastive: Évaluation de l'efficacité de la régulation par comparaison des écarts de complexité avec/sans régulateur
  3. Priorité universelle: Utilisation de la distribution universelle de Solomonoff-Levin pour fournir un cadre d'analyse indépendant de la distribution
  4. Modèle de machine de Turing à 3 bandes: Utilisation d'un modèle de calcul standard pour assurer l'universalité des résultats

Analyse Théorique

Relation avec le Principe du Modèle Interne

L'article compare en détail les différences entre le cadre TAI et le PMI:

AspectPMICadre TAI
HypothèsesSystèmes SLIT, hypothèses structurellesIndépendant de l'architecture, accouplement déterministe
Définition de « modèle »Copie dynamiqueDépendance algorithmique M(W:R)>0M(W:R) > 0
NécessitéStructurelleThéorique de l'information
Champ d'applicationRégulation classiqueÉpisode unique, indépendant de la distribution

Estimations Pratiques

Puisque la complexité de Kolmogorov n'est pas calculable, en pratique on utilise:

  • Compresseur Lempel-Ziv: Comme estimation supérieure de K()K(\cdot)
  • Méthode de décomposition en blocs (BDM): Via recherche en table de complexité pour petits blocs
  • Compresseur de réseau de neurones: Basé sur autoencodeurs variationnels, etc.

Exemple du Thermostat Domestique

L'article illustre l'application du cadre avec un thermostat:

  • Monde WW: Thermodynamique de la pièce + perturbations externes
  • Régulateur RR: Logique du thermostat
  • Sortie xx: Température intérieure ou signal d'erreur
  • Bon régulateur: Maintient la température dans un motif de zone morte régulier, plus compressible que sans régulation

Travaux Connexes

Théorie Classique de la Régulation

  1. GRT de Conant-Ashby (1970): Travail fondateur, mais définitions floues
  2. PMI de Francis-Wonham (1975-76): Résultats rigoureux pour systèmes linéaires
  3. Régulation de sortie non linéaire: Nécessite conditions supplémentaires de résolubilité et stabilité

Théorie Algorithmique de l'Information

  1. Induction de Solomonoff: Priorité universelle et théorèmes de codage
  2. Complexité de Kolmogorov: Mesure de complexité pour séquences individuelles
  3. Longueur de description minimale: Lien entre sélection de modèle et compression

Théories en Neurosciences

  1. Principe de l'énergie libre: Les agents biologiques minimisent l'énergie libre variationnelle
  2. Codage prédictif: Le cerveau comme machine prédictive
  3. Théorie des agents algorithmiques: Théorie de la conscience basée sur modèles de compression

Conclusions et Discussion

Conclusions Principales

  1. Nécessité algorithmique: Un avantage de complexité continu Δ>0\Delta > 0 rend exponentiellement impossible un faible M(W:R)M(W:R)
  2. Objectif canonique: Le théorème de codage identifie computationnellement la fonction objectif scalaire canonique
  3. Interprétation de l'agent: Le régulateur se comporte comme s'il minimisait la longueur de description

Limitations

  1. Infaisabilité computationnelle: La complexité de Kolmogorov n'est pas calculable, nécessitant des approximations
  2. Restriction à épisode unique: Les résultats sont basés sur réalisations individuelles, pouvant nécessiter plusieurs observations pour renforcer la confiance
  3. Exigences diagnostiques: Nécessite de sélectionner des signaux de lecture appropriés pour assurer l'efficacité du contraste
  4. Facteurs constants: Les constantes dépendantes de la machine peuvent être importantes en pratique

Directions Futures

  1. Extension multi-épisodes: Étude des preuves cumulatives sur plusieurs épisodes
  2. Algorithmes d'approximation: Développement de meilleures méthodes d'estimation de la complexité de Kolmogorov
  3. Vérification expérimentale: Test du cadre sur systèmes de contrôle réels
  4. Applications en neurosciences: Application de la théorie à la recherche sur les fonctions cérébrales

Évaluation Approfondie

Avantages

  1. Rigueur théorique: Fournit une version rigoureuse en théorie algorithmique de l'information du théorème classique du régulateur
  2. Applicabilité universelle: Ne dépend pas d'hypothèses linéaires ou probabilistes, champ d'application plus large
  3. Intuitions profondes: Relie régulation et compression, offrant une nouvelle perspective théorique
  4. Valeur interdisciplinaire: Fournit une base théorique pour les neurosciences et sciences cognitives

Insuffisances

  1. Défis pratiques: L'incalculabilité de la complexité de Kolmogorov limite l'application directe
  2. Vérification empirique insuffisante: Manque de vérification sur systèmes réels à grande échelle
  3. Dépendance aux constantes: Les facteurs constants dans les résultats peuvent affecter l'efficacité pratique
  4. Perspective unique: Se concentre principalement sur la perspective théorique de l'information, pouvant négliger d'autres facteurs importants

Impact

  1. Contribution théorique: Fournit une nouvelle base théorique de l'information pour la théorie du contrôle
  2. Pont interdisciplinaire: Relie théorie du contrôle, théorie de l'information et neurosciences
  3. Innovation méthodologique: Démontre le potentiel d'application de la TAI en théorie des systèmes
  4. Recherche future: Pose les fondations pour la recherche ultérieure dans les domaines connexes

Scénarios d'Application

  1. Analyse théorique: Approprié pour l'analyse théorique et la compréhension des systèmes de régulation
  2. Diagnostic de système: Peut évaluer si les systèmes de contrôle contiennent des modèles du monde appropriés
  3. Recherche en neurosciences: Fournit un cadre quantitatif pour étudier les fonctions prédictives du cerveau
  4. Intelligence artificielle: Guide la conception de systèmes intelligents avec modèles du monde

Références Bibliographiques

L'article cite 65 références importantes, incluant principalement:

  1. Conant & Ashby (1970): « Every good regulator of a system must be a model of that system »
  2. Francis & Wonham (1975, 1976): Travaux originaux du Principe du Modèle Interne
  3. Li & Vitányi (2019): Manuel faisant autorité sur la complexité de Kolmogorov
  4. Solomonoff (1964): Travail fondateur de la théorie algorithmique des probabilités
  5. Grünwald (2007): Principe de Longueur de Description Minimale
  6. Friston: Travaux connexes sur le Principe de l'Énergie Libre
  7. Ruffini: Travaux antérieurs de l'auteur en théorie des agents algorithmiques

Évaluation Globale: Cet article est théoriquement très rigoureux et profond, introduisant avec succès la théorie algorithmique de l'information dans la théorie du contrôle et offrant une nouvelle perspective sur le théorème classique du régulateur. Bien que présentant des défis en termes de praticabilité, ses contributions théoriques et sa valeur interdisciplinaire en font un travail important dans les domaines connexes.