2025-11-24T05:55:18.047439

Velocity and Density-Aware RRI Analysis and Optimization for AoI Minimization in IoV SPS

Ji, Wang, Wu et al.
Addressing the problem of Age of Information (AoI) deterioration caused by packet collisions and vehicle speed-related channel uncertainties in Semi-Persistent Scheduling (SPS) for the Internet of Vehicles (IoV), this letter proposes an optimization approach based on Large Language Models (LLM) and Deep Deterministic Policy Gradient (DDPG). First, an AoI calculation model influenced by vehicle speed, vehicle density, and Resource Reservation Interval (RRI) is established, followed by the design of a dual-path optimization scheme. The DDPG is guided by the state space and reward function, while the LLM leverages contextual learning to generate optimal parameter configurations. Experimental results demonstrate that LLM can significantly reduce AoI after accumulating a small number of exemplars without requiring model training, whereas the DDPG method achieves more stable performance after training.
academic

Analisi della Velocità e della Densità Consapevole dell'RRI e Ottimizzazione per la Minimizzazione dell'AoI nell'IoV SPS

Informazioni Fondamentali

Riassunto

Questo articolo affronta il problema del deterioramento dell'Età dell'Informazione (AoI) nella Programmazione Semi-Persistente (SPS) dell'Internet dei Veicoli (IoV), causato da collisioni di pacchetti e incertezze del canale correlate alla velocità dei veicoli. Propone un metodo di ottimizzazione basato su Modelli di Linguaggio di Grandi Dimensioni (LLM) e Gradiente di Politica Deterministica Profonda (DDPG). Innanzitutto, viene stabilito un modello di calcolo dell'AoI influenzato dalla velocità dei veicoli, dalla densità dei veicoli e dall'Intervallo di Prenotazione delle Risorse (RRI). Successivamente, viene progettato uno schema di ottimizzazione a doppio percorso. DDPG è guidato attraverso lo spazio degli stati e la funzione di ricompensa, mentre l'LLM utilizza l'apprendimento contestuale per generare configurazioni di parametri ottimali. I risultati sperimentali dimostrano che l'LLM può ridurre significativamente l'AoI dopo aver accumulato pochi campioni senza richiedere l'addestramento del modello, mentre il metodo DDPG raggiunge prestazioni più stabili dopo l'addestramento.

Contesto di Ricerca e Motivazione

Definizione del Problema

L'Internet dei Veicoli (IoV), come tecnologia centrale dei sistemi di trasporto intelligente, richiede che la comunicazione Veicolo-a-Veicolo (V2V) trasmetta messaggi di sicurezza di base critici (BSM). Nello standard 5G NR V2X, la comunicazione V2V utilizza tipicamente la Modalità 2 per la selezione autonoma delle risorse, utilizzando la Programmazione Semi-Persistente (SPS) per competere e occupare risorse.

Problemi Fondamentali

  1. Limitazioni dell'SPS Tradizionale: L'SPS esistente dipende da parametri fissi basati sull'esperienza (come l'RRI), che possono portare a prestazioni subottimali con diverse densità di veicoli
  2. Deterioramento delle Prestazioni dell'AoI: Le collisioni di pacchetti e i fallimenti di trasmissione continui riducono significativamente le prestazioni dell'AoI
  3. Accoppiamento Multi-Fattoriale: Esiste una complessa relazione non lineare tra velocità dei veicoli, densità e RRI

Motivazione della Ricerca

  • I veicoli ad alta velocità (in particolare quelli che viaggiano in direzioni opposte) producono significativi spostamenti Doppler, che possono causare fallimenti di trasmissione aggiuntivi
  • In assenza di un canale di retroazione del Collegamento Fisico Laterale (PSFCH) configurato, i messaggi broadcast come i BSM utilizzano tipicamente ritrasmissioni cieche
  • È necessario considerare simultaneamente la velocità e la densità dei veicoli per ottimizzare la selezione dell'RRI e migliorare le prestazioni di comunicazione

Contributi Fondamentali

  1. Modello AoI Comprensivo: Propone un modello di calcolo dell'AoI che considera simultaneamente gli effetti della velocità dei veicoli, della densità dei veicoli e dell'RRI, integrando l'incertezza delle condizioni del canale fisico e la probabilità di collisione delle risorse
  2. Quadro di Ottimizzazione a Doppio Percorso: Progetta una strategia di ottimizzazione duale basata su LLM e DDPG, dove l'LLM utilizza l'apprendimento contestuale per una convergenza rapida e l'DDPG fornisce un'esplorazione stabile dello spazio continuo
  3. Modellazione del Canale Consapevole della Velocità: Incorpora l'effetto Doppler causato dalla velocità dei veicoli nel modello di canale Markoviano, caratterizzando accuratamente la probabilità di fallimento della trasmissione in scenari ad alta velocità
  4. Verifica Sperimentale: Attraverso esperimenti di simulazione, verifica che l'ottimizzazione congiunta della densità dei veicoli, dell'RRI e della velocità dei veicoli riduce significativamente l'AoI del sistema IoV

Dettagli del Metodo

Definizione del Compito

Input: Velocità del veicolo v, densità del veicolo ρ, Intervallo di Prenotazione delle Risorse RRI
Output: Configurazione di parametri ottimale che minimizza l'AoI del sistema
Vincoli: Relazione velocità-densità sotto flusso di traffico fisso Q: ρ = Q/v

Modello del Sistema

1. Topologia di Rete

Considera un segmento di autostrada finito di lunghezza 2L con due corsie in direzioni opposte. Il numero totale di veicoli è:

mtotal = 2ρlL

2. Modello di Probabilità di Collisione

La probabilità di collisione dei pacchetti del veicolo n è:

Pcoll = 1 - (1 - 1/(Nr - Ns/2))^m

dove Nr è il numero massimo di RBG selezionabili nella finestra di selezione e Ns è il numero di veicoli nell'intervallo di percezione.

3. Modellazione dello Stato del Canale

Basata su un processo Markoviano, considerando l'effetto dello spostamento Doppler fd = fcv/c:

  • Probabilità di transizione dello stato pp (mantenimento dello stato sfavorevole) e pi (mantenimento dello stato ideale)
  • Calcolo ricorsivo della probabilità complessiva di perdita di pacchetti pd

4. Modello di Calcolo dell'AoI

L'AoI del sistema è rappresentato come la somma del ritardo di accodamento e del ritardo di trasmissione:

A = Tq + Tt

Il ritardo di accodamento Tq considera l'effetto combinato di ritrasmissioni per collisione e fallimenti del canale:

Tq = (2/Ns) * Σ[RRI + E[Ta]/(1-pd²) + max(tGAP, RRI/2)pd/(1-pd)]

Strategie di Ottimizzazione

1. Metodo DDPG

Modella il problema come un Processo Decisionale Markoviano (MDP):

  • Spazio degli Stati: st = vt, ρt, RRIt, pd,t, Pcoll,t
  • Spazio delle Azioni: at = RRIt+1, vt+1
  • Funzione di Ricompensa: Progetta una funzione di ricompensa segmentata che fornisce diverse pendenze di ricompensa per diversi intervalli di AoI

Utilizza l'architettura Actor-Critic:

  • Rete Actor: μ(st|θμ) produce azioni deterministiche
  • Rete Critic: Q(st,at|θQ) valuta il valore stato-azione
  • Reti target e riproduzione dell'esperienza migliorano la stabilità dell'addestramento

2. Metodo LLM

Progetta una struttura di prompt in cinque parti:

  1. Contesto del Compito: Spiega la composizione dell'AoI e i fattori influenti
  2. Obiettivo del Compito: Chiarisce l'obiettivo di minimizzare l'AoI del sistema
  3. Compito Principale: Definisce il ruolo dell'LLM come algoritmo di ottimizzazione
  4. Formato di Output: Standardizza la presentazione dei risultati
  5. Set di Esempi: Fornisce selezioni di parametri rappresentativi e valori di AoI corrispondenti

Quadro dell'Algoritmo LLM:

  • Ragionamento multi-step per generare più risultati di output
  • Simulatore ambientale calcola l'AoI per ottenere la soluzione ottimale attuale
  • Esclude esperienze duplicate e aggiunge esperienze valide al set di decisioni storiche
  • Determina la convergenza quando il ragionamento ripetuto non mostra miglioramenti significativi

Configurazione Sperimentale

Parametri di Simulazione

  • Scenario: Autostrada bidirezionale
  • Flusso di Traffico: 6000 veicoli/ora (fisso)
  • Intervallo RRI: 10-100 ms
  • Intervallo di Densità dei Veicoli: 50-200 veicoli/km
  • Intervallo di Velocità: 30-120 km/h
  • Lunghezza dell'Autostrada: 2L (L è la semi-lunghezza)

Indicatori di Valutazione

  • Indicatore Principale: AoI medio del sistema
  • Convergenza: Tendenza di variazione dell'AoI entro 50 cicli di addestramento

Metodi di Confronto

  1. Metodo LLM: Tre diversi modelli di linguaggio di grandi dimensioni
  2. Algoritmo DDPG: Gradiente di Politica Deterministica Profonda
  3. Algoritmo Genetico: Metodo di ottimizzazione tradizionale
  4. Soluzione Ottimale: Valore ottimale teorico ottenuto mediante ricerca esaustiva

Risultati Sperimentali

Risultati Principali

1. Impatto della Velocità del Veicolo sull'AoI (Figura 3a)

  • Bassa Velocità (Alta Densità): L'aumento dell'AoI è principalmente causato dall'elevata probabilità di collisione dei pacchetti nella selezione delle risorse SPS
  • Alta Velocità (Bassa Densità): Sebbene le collisioni siano minori, il grave deterioramento del canale Doppler aumenta il tasso di fallimento dello strato fisico
  • Impatto dell'RRI:
    • Con RRI grande, la probabilità di collisione è trascurabile e l'AoI aumenta gradualmente con la velocità
    • Con RRI piccolo, la collisione è dominante e l'AoI raggiunge il picco a bassa velocità, quindi diminuisce con l'aumento della velocità

2. Impatto dell'RRI sull'AoI (Figura 3b)

  • Bassa Velocità (Alta Densità): Con valori RRI bassi, l'elevata probabilità di collisione causa un AoI maggiore, con una relazione che tende a diventare lineare all'aumentare dell'RRI
  • Alta Velocità (Bassa Densità): La probabilità di perdita di pacchetti del canale aumenta e l'AoI cresce più rapidamente con l'RRI

3. Confronto delle Prestazioni di Diversi Metodi (Figura 3c)

  • Metodo LLM:
    • Inizialmente, a causa dell'esplorazione di diverse combinazioni di parametri, l'AoI fluttua notevolmente
    • Poiché il prompt contiene esempi rappresentativi, ha una soluzione iniziale relativamente buona
    • Converge rapidamente con solo poche iterazioni
  • Algoritmo DDPG:
    • Richiede più fasi di esplorazione e regolazione dei parametri della rete
    • Le prestazioni sono più stabili dopo l'addestramento
  • Algoritmo Genetico: La velocità di convergenza è intermedia tra LLM e DDPG

Scoperte Chiave

  1. Accoppiamento Tri-Fattoriale Velocità-Densità-RRI: L'ottimizzazione congiunta è significativamente superiore all'ottimizzazione a singolo fattore
  2. Convergenza Rapida dell'LLM: L'apprendimento contestuale basato su esempi converge rapidamente senza richiedere l'addestramento online
  3. Stabilità dell'DDPG: Sebbene la convergenza sia più lenta, mostra prestazioni più stabili nell'esplorazione dello spazio continuo
  4. Importanza dell'Effetto Doppler: L'impatto delle condizioni del canale sull'AoI in scenari ad alta velocità non può essere trascurato

Lavori Correlati

Ricerca sull'Ottimizzazione dell'SPS

  • Metodi Tradizionali: Principalmente focalizzati sull'influenza della densità dei veicoli sulla selezione dell'RRI
  • Schemi Adattivi: Regolazione dinamica del contatore di riselezione delle risorse (RC) e dell'RRI in base alla disponibilità del canale
  • Analisi dell'AoI: Studio dell'impatto dell'occupazione continua delle risorse nell'SPS sull'AoI del sistema

Punti di Innovazione di Questo Articolo

  1. Modellazione Multi-Fattoriale: Primo a considerare simultaneamente l'effetto di accoppiamento di velocità, densità e RRI
  2. Ottimizzazione AI: Introduce una strategia di ottimizzazione a doppio percorso con LLM e DDPG
  3. Modellazione del Canale: Incorpora l'effetto Doppler nel modello di canale Markoviano

Conclusioni e Discussione

Conclusioni Principali

  1. Validità del Modello: Il modello AoI stabilito riflette accuratamente l'effetto combinato della velocità dei veicoli, della densità e dell'RRI
  2. Effetto di Ottimizzazione: L'ottimizzazione congiunta riduce significativamente l'AoI del sistema IoV
  3. Confronto dei Metodi: Il metodo LLM converge rapidamente ma richiede buoni esempi, mentre il metodo DDPG è stabile ma richiede addestramento

Limitazioni

  1. Limitazione dello Scenario: Considera solo scenari di autostrada bidirezionale
  2. Condizioni di Assunzione: Assume distribuzione uniforme dei veicoli e flusso di traffico fisso
  3. Modello del Canale: Il modello di canale Markoviano semplificato potrebbe non riflettere completamente l'ambiente di canale complesso reale
  4. Dipendenza dall'LLM: Il metodo LLM dipende da esempi di alta qualità e dalla progettazione del prompt

Direzioni Future

  1. Messa a Punto Leggera: Progettare uno schema di messa a punto leggera dell'LLM per ridurre la dipendenza dagli esempi
  2. Distribuzione in Tempo Reale: Integrare il motore di ottimizzazione nelle unità lato strada C-V2X per la configurazione dinamica dell'RRI
  3. Scenario Multi-Base Station: Considerare scenari multi-base station per affrontare i picchi di AoI causati dal cambio di segnale
  4. Scenari Più Complessi: Estendere a scenari di traffico più complessi come strade urbane e incroci

Valutazione Approfondita

Punti di Forza

  1. Importanza del Problema: Affronta il problema importante dell'ottimizzazione dell'AoI nell'IoV, con valore di applicazione pratica
  2. Modellazione Completa: Considera comprensivamente l'effetto di accoppiamento di collisioni, fallimenti del canale, ritrasmissioni cieche e altri fattori
  3. Innovazione del Metodo: Primo a introdurre l'LLM nell'ottimizzazione dei parametri IoV, fornendo nuove prospettive di soluzione
  4. Esperimenti Sufficienti: Verifica l'efficacia del metodo attraverso simulazioni da più angolazioni

Insufficienze

  1. Limitazione dello Scenario: Considera solo scenari di autostrada, l'applicabilità agli ambienti stradali urbani complessi rimane da verificare
  2. Assunzioni del Modello: Assunzioni come la distribuzione uniforme dei veicoli sono troppo idealizzate
  3. Interpretabilità dell'LLM: Il processo decisionale dell'LLM manca di interpretabilità, rendendo difficile comprendere il suo meccanismo di ottimizzazione
  4. Considerazione della Realtime: Non discute sufficientemente la complessità computazionale e i requisiti di realtime nella distribuzione pratica

Impatto

  1. Contributo Accademico: Fornisce un nuovo modello teorico e metodi di ottimizzazione per l'ottimizzazione dell'AoI nell'IoV
  2. Valore Pratico: Può fornire riferimenti per la formulazione di standard di rete 5G/6G per veicoli e la progettazione del sistema
  3. Ispirazione del Metodo: L'applicazione dell'LLM nell'ottimizzazione di rete può ispirare più ricerche correlate

Scenari Applicabili

  • Ottimizzazione dei parametri del sistema di rete veicolare su autostrada
  • Configurazione dei parametri SPS della Modalità 2 5G NR V2X
  • Problemi di ottimizzazione di rete che richiedono considerazione dell'accoppiamento multi-fattoriale
  • Sistemi di comunicazione in tempo reale sensibili all'AoI

Bibliografia

Questo articolo cita 20 articoli correlati, coprendo principalmente:

  • Ricerca fondamentale su IoV e comunicazione V2X
  • Meccanismo SPS e ottimizzazione dei parametri
  • Teoria e applicazioni dell'AoI
  • Metodi di apprendimento per rinforzo profondo
  • Applicazioni di modelli di linguaggio di grandi dimensioni

Valutazione Complessiva: Questo articolo propone soluzioni innovative per importanti problemi nell'Internet dei Veicoli, con contributi sia nella modellazione teorica che nella progettazione dei metodi. L'applicazione dell'LLM nell'ottimizzazione di rete ha una certa novità, ma richiede ulteriore verifica della sua efficacia e praticità in scenari più complessi.