2025-11-24T05:55:18.047439

Velocity and Density-Aware RRI Analysis and Optimization for AoI Minimization in IoV SPS

Ji, Wang, Wu et al.
Addressing the problem of Age of Information (AoI) deterioration caused by packet collisions and vehicle speed-related channel uncertainties in Semi-Persistent Scheduling (SPS) for the Internet of Vehicles (IoV), this letter proposes an optimization approach based on Large Language Models (LLM) and Deep Deterministic Policy Gradient (DDPG). First, an AoI calculation model influenced by vehicle speed, vehicle density, and Resource Reservation Interval (RRI) is established, followed by the design of a dual-path optimization scheme. The DDPG is guided by the state space and reward function, while the LLM leverages contextual learning to generate optimal parameter configurations. Experimental results demonstrate that LLM can significantly reduce AoI after accumulating a small number of exemplars without requiring model training, whereas the DDPG method achieves more stable performance after training.
academic

Geschwindigkeits- und Dichte-bewusste RRI-Analyse und Optimierung zur AoI-Minimierung in IoV SPS

Grundinformationen

Zusammenfassung

Dieses Paper adressiert das Problem der Verschlechterung des Informationsalters (AoI) in der Halbpersistenten Planung (SPS) des Internet of Vehicles (IoV), verursacht durch Paketkollisionen und fahrzeuggeschwindigkeitsabhängige Kanalungewissheiten. Es wird eine auf großen Sprachmodellen (LLM) und tiefem deterministischem Richtliniengradient (DDPG) basierende Optimierungsmethode vorgeschlagen. Zunächst wird ein AoI-Berechnungsmodell etabliert, das von Fahrzeuggeschwindigkeit, Fahrzeugdichte und Ressourcenreservierungsintervall (RRI) beeinflusst wird. Anschließend wird ein Dual-Path-Optimierungsschema entworfen. DDPG wird durch Zustandsraum und Belohnungsfunktion geleitet, während LLM kontextabhängiges Lernen nutzt, um optimale Parameterkonfigurationen zu generieren. Experimentelle Ergebnisse zeigen, dass LLM nach Akkumulation weniger Stichproben das AoI erheblich reduzieren kann, ohne Modelltraining zu benötigen, während die DDPG-Methode nach dem Training stabilere Leistung erreicht.

Forschungshintergrund und Motivation

Problemdefinition

Das Internet of Vehicles (IoV) als Kerntechnologie intelligenter Verkehrssysteme erfordert Fahrzeug-zu-Fahrzeug (V2V)-Kommunikation zur Übertragung kritischer Grundsicherheitsmeldungen (BSM). Im 5G NR V2X-Standard nutzt V2V-Kommunikation typischerweise Mode 2 für autonome Ressourcenauswahl und verwendet Halbpersistente Planung (SPS) zur Ressourcenkonkurrenz und -besetzung.

Kernprobleme

  1. Einschränkungen der traditionellen SPS: Bestehende SPS-Systeme verlassen sich auf empirisch festgelegte Parameter (wie RRI), die bei unterschiedlichen Fahrzeugdichten zu suboptimaler Leistung führen können
  2. AoI-Leistungsverschlechterung: Paketkollusionen und kontinuierliche Übertragungsausfälle reduzieren die AoI-Leistung erheblich
  3. Mehrfaktor-Kopplung: Komplexe nichtlineare Kopplungsbeziehungen existieren zwischen Fahrzeuggeschwindigkeit, Dichte und RRI

Forschungsmotivation

  • Hochgeschwindigkeitsfahrzeuge (besonders bei Gegenverkehr) erzeugen signifikante Dopplerverschiebungen, die zu zusätzlichen Übertragungsausfällen führen können
  • Ohne Konfiguration eines Physical Sidelink Feedback Channel (PSFCH) verwenden Broadcast-Meldungen wie BSM typischerweise blinde Wiederübertragungen
  • Es ist notwendig, sowohl Fahrzeuggeschwindigkeit als auch Dichte zu berücksichtigen, um die RRI-Auswahl zu optimieren und die Kommunikationsleistung zu verbessern

Kernbeiträge

  1. Etablierung eines umfassenden AoI-Modells: Vorschlag eines AoI-Berechnungsmodells, das gleichzeitig die Auswirkungen von Fahrzeuggeschwindigkeit, Fahrzeugdichte und RRI berücksichtigt und die Ungewissheit physikalischer Kanalbedingungen sowie die Wahrscheinlichkeit von Ressourcenpaketkollusionen integriert
  2. Dual-Path-Optimierungsrahmen: Entwurf einer dualen Optimierungsstrategie basierend auf LLM und DDPG, wobei LLM kontextabhängiges Lernen für schnelle Konvergenz nutzt und DDPG stabile kontinuierliche Raumexploration bietet
  3. Geschwindigkeitsbewusste Kanalmodellierung: Integration des durch Fahrzeuggeschwindigkeit verursachten Dopplereffekts in das Markov-Kanalmodell zur genauen Charakterisierung der Übertragungsausfallwahrscheinlichkeit in Hochgeschwindigkeitsszenarios
  4. Experimentelle Validierung: Simulationsexperimente validieren, dass die gemeinsame Optimierung von Fahrzeugdichte, RRI und Fahrzeuggeschwindigkeit das AoI des IoV-Systems erheblich reduziert

Methodische Details

Aufgabendefinition

Eingaben: Fahrzeuggeschwindigkeit v, Fahrzeugdichte ρ, Ressourcenreservierungsintervall RRI
Ausgaben: Optimale Parameterkonfiguration zur Minimierung des System-AoI
Nebenbedingungen: Geschwindigkeits-Dichte-Beziehung bei festem Verkehrsfluss Q: ρ = Q/v

Systemmodell

1. Netzwerktopologie

Betrachtet ein endliches Autobahnnsegment der Länge 2L mit zwei entgegengesetzten Fahrspuren. Die Gesamtzahl der Fahrzeuge beträgt:

mtotal = 2ρlL

2. Kollisionswahrscheinlichkeitsmodell

Die Paketkollusionswahrscheinlichkeit für Fahrzeug n ist:

Pcoll = 1 - (1 - 1/(Nr - Ns/2))^m

wobei Nr die maximale Anzahl wählbarer RBGs im Auswahlzeitfenster ist und Ns die Anzahl der Fahrzeuge im Erfassungsbereich darstellt.

3. Kanalzustandsmodellierung

Basierend auf Markov-Prozessmodellierung des Kanalzustands unter Berücksichtigung der Dopplerverschiebung fd = fcv/c:

  • Zustandsübergangswahrscheinlichkeiten pp (Beibehaltung des schlechten Zustands) und pi (Beibehaltung des idealen Zustands)
  • Rekursive Berechnung der Gesamtpaketverlustrwahrscheinlichkeit pd

4. AoI-Berechnungsmodell

Das System-AoI wird als Summe von Warteverzögerung und Übertragungsverzögerung ausgedrückt:

A = Tq + Tt

Die Warteverzögerung Tq berücksichtigt die kombinierte Auswirkung von Kollisionswiederübertragung und Kanalausfall:

Tq = (2/Ns) * Σ[RRI + E[Ta]/(1-pd²) + max(tGAP, RRI/2)pd/(1-pd)]

Optimierungsstrategien

1. DDPG-Methode

Modellierung des Problems als Markov-Entscheidungsprozess (MDP):

  • Zustandsraum: st = vt, ρt, RRIt, pd,t, Pcoll,t
  • Aktionsraum: at = RRIt+1, vt+1
  • Belohnungsfunktion: Entwurf einer segmentierten Belohnungsfunktion mit unterschiedlichen Steigungen für verschiedene AoI-Intervalle

Verwendung einer Actor-Critic-Architektur:

  • Actor-Netzwerk: μ(st|θμ) gibt deterministische Aktionen aus
  • Critic-Netzwerk: Q(st,at|θQ) bewertet den Zustand-Aktions-Wert
  • Zielnetzwerke und Experience Replay verbessern die Trainingsstabilität

2. LLM-Methode

Entwurf einer fünfteiligen Prompt-Struktur:

  1. Aufgabenhintergrund: Erklärung der AoI-Zusammensetzung und Einflussfaktoren
  2. Aufgabenziel: Klare Definition des Ziels zur Minimierung des System-AoI
  3. Hauptaufgabe: Definition der Rolle von LLM als Optimierungsalgorithmus
  4. Ausgabeformat: Standardisierte Ergebnispräsentation
  5. Beispielsammlung: Bereitstellung repräsentativer Parameterauswahlen und entsprechender AoI-Werte

LLM-Algorithmus-Rahmen:

  • Mehrstufiges Reasoning zur Generierung mehrerer Ausgabeergebnisse
  • Umgebungssimulator berechnet AoI zur Ermittlung der aktuellen optimalen Lösung
  • Ausschluss doppelter Erfahrungen, Hinzufügen effektiver Erfahrungen zur historischen Entscheidungsmenge
  • Konvergenzbeurteilung bei mehrfachen Iterationen ohne signifikante Verbesserung

Experimentelle Einrichtung

Simulationsparameter

  • Szenario: Autobahnzweispurig bidirektional
  • Verkehrsfluss: 6000 Fahrzeuge/Stunde (fest)
  • RRI-Bereich: 10-100 ms
  • Fahrzeugdichte-Bereich: 50-200 Fahrzeuge/km
  • Geschwindigkeitsbereich: 30-120 km/h
  • Autobahnlänge: 2L (L ist Halblänge)

Bewertungsindikatoren

  • Hauptindikator: Durchschnittliches System-AoI
  • Konvergenz: AoI-Änderungstrend über 50 Trainingsrunden

Vergleichsmethoden

  1. LLM-Methode: Drei verschiedene große Sprachmodelle
  2. DDPG-Algorithmus: Tiefes deterministisches Richtlinien-Gradient-Verfahren
  3. Genetischer Algorithmus: Traditionelle Optimierungsmethode
  4. Optimale Lösung: Theoretisches Optimum durch erschöpfende Suche

Experimentelle Ergebnisse

Hauptergebnisse

1. Auswirkung der Fahrzeuggeschwindigkeit auf AoI (Abbildung 3a)

  • Niedrige Geschwindigkeit (hohe Dichte): AoI-Zunahme wird hauptsächlich durch hohe Paketkollusionswahrscheinlichkeit bei SPS-Ressourcenauswahl verursacht
  • Hohe Geschwindigkeit (niedrige Dichte): Obwohl Kollisionen gering sind, führt schwere Doppler-Kanalverschlechterung zu erhöhter physikalischer Ausfallrate
  • RRI-Auswirkung:
    • Bei großem RRI ist die Kollisionswahrscheinlichkeit vernachlässigbar, AoI nimmt mit Geschwindigkeit allmählich zu
    • Bei kleinem RRI dominiert Kollision, AoI erreicht Spitzenwert bei niedriger Geschwindigkeit und sinkt dann mit zunehmender Geschwindigkeit

2. Auswirkung von RRI auf AoI (Abbildung 3b)

  • Niedrige Geschwindigkeit (hohe Dichte): Kleine RRI-Werte führen zu hoher Kollisionswahrscheinlichkeit und größerem AoI, mit linearer Beziehung bei RRI-Zunahme
  • Hohe Geschwindigkeit (niedrige Dichte): Erhöhte Kanalpaketverlustrwahrscheinlichkeit, AoI wächst schneller mit RRI

3. Leistungsvergleich verschiedener Methoden (Abbildung 3c)

  • LLM-Methode:
    • Anfängliche AoI-Schwankungen durch Exploration verschiedener Parameterkombinationen
    • Bessere Initiallösung durch repräsentative Beispiele im Prompt
    • Schnelle Konvergenz mit nur wenigen Iterationen
  • DDPG-Algorithmus:
    • Erfordert mehr Explorations- und Netzwerkparameter-Anpassungsschritte
    • Stabilere Leistung nach dem Training
  • Genetischer Algorithmus: Konvergenzgeschwindigkeit zwischen LLM und DDPG

Wichtige Erkenntnisse

  1. Geschwindigkeit-Dichte-RRI-Dreifaktor-Kopplung: Gemeinsame Optimierung ist deutlich überlegen gegenüber Einzelfaktor-Optimierung
  2. Schnelle LLM-Konvergenz: Beispielbasiertes kontextabhängiges Lernen konvergiert schnell ohne Online-Training
  3. DDPG-Stabilität: Obwohl langsamer konvergierend, zeigt sich stabilere Leistung bei kontinuierlicher Raumexploration
  4. Bedeutung des Dopplereffekts: Kanalzustandsauswirkungen auf AoI sind in Hochgeschwindigkeitsszenarios nicht zu vernachlässigen

Verwandte Arbeiten

SPS-Optimierungsforschung

  • Traditionelle Methoden: Konzentrieren sich hauptsächlich auf die Auswirkung der Fahrzeugdichte auf RRI-Auswahl
  • Adaptive Schemata: Dynamische Anpassung des Ressourcen-Reselection-Zählers (RC) und RRI basierend auf Kanalverfügbarkeit
  • AoI-Analyse: Untersuchung der Auswirkung kontinuierlicher Ressourcenbesetzung in SPS auf System-AoI

Innovationen dieses Papers

  1. Mehrfaktor-Modellierung: Erste Berücksichtigung der gekoppelten Auswirkungen von Geschwindigkeit, Dichte und RRI
  2. KI-Optimierung: Einführung einer Dual-Path-Optimierungsstrategie mit LLM und DDPG
  3. Kanalmodellierung: Integration des Dopplereffekts in das Markov-Kanalmodell

Schlussfolgerungen und Diskussion

Hauptschlussfolgerungen

  1. Modellgültigkeit: Das etablierte AoI-Modell kann die kombinierte Auswirkung von Fahrzeuggeschwindigkeit, Dichte und RRI genau widerspiegeln
  2. Optimierungseffekt: Gemeinsame Optimierung reduziert das AoI des IoV-Systems erheblich
  3. Methodenvergleich: LLM-Methode konvergiert schnell, benötigt aber gute Beispiele; DDPG-Methode ist stabil, benötigt aber Training

Einschränkungen

  1. Szenariobeschränkung: Berücksichtigung nur von Autobahnzweispurszenarien
  2. Annahmebedingungen: Annahmen wie gleichmäßige Fahrzeugverteilung und fester Verkehrsfluss sind idealisiert
  3. Kanalmodell: Vereinfachtes Markov-Kanalmodell kann komplexe reale Kanalumgebungen möglicherweise nicht vollständig widerspiegeln
  4. LLM-Abhängigkeit: LLM-Methode hängt von hochwertigen Beispielen und Prompt-Design ab

Zukünftige Richtungen

  1. Leichtgewichtige Feinabstimmung: Entwurf von LLM-Leichtgewichts-Feinabstimmungsschemata zur Reduzierung der Beispielabhängigkeit
  2. Echtzeitbereitstellung: Integration der Optimierungs-Engine in C-V2X-Roadside-Units für dynamische RRI-Konfiguration
  3. Multi-Basisstation-Szenarios: Berücksichtigung von Multi-Basisstation-Szenarien zur Adressierung von AoI-Spitzenwerten durch Signalwechsel
  4. Komplexere Szenarien: Erweiterung auf städtische Straßen, Kreuzungen und andere komplexe Verkehrsszenarios

Tiefgreifende Bewertung

Stärken

  1. Problemwichtigkeit: Adressiert das wichtige Problem der AoI-Optimierung in IoV mit praktischem Anwendungswert
  2. Umfassende Modellierung: Berücksichtigung der gekoppelten Auswirkungen von Kollisionen, Kanalausfällen, blinden Wiederübertragungen und anderen Faktoren
  3. Methodische Innovation: Erste Anwendung von LLM auf IoV-Parameteroptimierung mit neuen Lösungsansätzen
  4. Ausreichende Experimente: Validierung der Methodeneffektivität durch mehrdimensionale Simulationen

Mängel

  1. Szenariobeschränkung: Nur Autobahnszenarien, Anwendbarkeit auf komplexe städtische Straßenumgebungen zu überprüfen
  2. Modellannahmen: Annahmen wie gleichmäßige Fahrzeugverteilung sind zu idealisiert
  3. LLM-Interpretierbarkeit: Mangelnde Interpretierbarkeit von LLM-Entscheidungsprozessen, schwer zu verstehen Optimierungsmechanismen
  4. Echtzeitüberlegungen: Unzureichende Diskussion von Rechenkomplexität und Echtzeitanforderungen bei praktischer Bereitstellung

Einflussfaktor

  1. Akademischer Beitrag: Bietet neues theoretisches Modell und Optimierungsmethode für AoI-Optimierung in IoV
  2. Praktischer Wert: Kann als Referenz für 5G/6G-Fahrzeugnetznormfestlegung und Systemdesign dienen
  3. Methodische Inspiration: LLM-Anwendung in Netzwerkoptimierung kann weitere verwandte Forschungen inspirieren

Anwendungsszenarien

  • Parameteroptimierung von Autobahnfahrzeugnetzsystemen
  • SPS-Parameterkonfiguration für 5G NR V2X Mode 2
  • Netzwerkoptimierungsprobleme, die Mehrfaktor-Kopplung berücksichtigen
  • AoI-sensitive Echtzeit-Kommunikationssysteme

Literaturverzeichnis

Dieses Paper zitiert 20 relevante Literaturquellen, hauptsächlich abdeckend:

  • Grundlagenforschung zu IoV und V2X-Kommunikation
  • SPS-Mechanismus und Parameteroptimierung
  • AoI-Theorie und Anwendungen
  • Tiefe Reinforcement-Learning-Methoden
  • Anwendungen großer Sprachmodelle

Gesamtbewertung: Dieses Paper schlägt innovative Lösungen für wichtige Probleme in der Fahrzeugvernetzung vor und trägt sowohl in theoretischer Modellierung als auch in Methodendesign bei. Die Anwendung von LLM in der Netzwerkoptimierung hat gewisse Neuheit, erfordert aber weitere Validierung ihrer Effektivität und Praktikabilität in komplexeren Szenarien.