К интеллектуальному позиционированию антенн: использование DRL для систем ISAC с поддержкой FAS

Основная информация

• ID статьи: 2501.01281
• Название: Towards Intelligent Antenna Positioning: Leveraging DRL for FAS-Aided ISAC Systems
• Авторы: Shunxing Yang, Junteng Yao, Jie Tang, Tuo Wu, Maged Elkashlan, Chau Yuen, Mérouane Debbah, Hyundong Shin, Matthew Valenti
• Классификация: eess.SP (Электротехника и системные науки - обработка сигналов)
• Дата публикации: 2 января 2025 г. (препринт arXiv)
• Ссылка на статью: https://arxiv.org/abs/2501.01281

Аннотация

Системы текучих антенн (FAS) обеспечивают динамическое позиционирование антенн, открывая новые возможности для повышения производительности интегрированных систем восприятия и коммуникации (ISAC). Однако существующие исследования в основном сосредоточены на улучшении коммуникации или восприятии одной цели, в то время как сценарии с несколькими целями остаются недостаточно изученными. Кроме того, совместная оптимизация формирования луча и позиционирования антенн представляет собой высоконевыпуклую задачу, которая становится непрактичной при использовании традиционных методов с увеличением количества текучих антенн. Для решения этих проблем в статье предлагается структура блочного координатного спуска (BCD), интегрирующая глубокое обучение с подкреплением (DRL), для интеллектуального позиционирования антенн. Используя алгоритм глубокого детерминированного градиента политики (DDPG), предложенная структура эффективно уравновешивает производительность восприятия и коммуникации. Результаты моделирования демонстрируют масштабируемость и эффективность предложенного метода.

Исследовательский контекст и мотивация

Определение проблемы

Основная проблема, которую решает данное исследование, заключается в том, как достичь совместной оптимизации формирования луча и позиционирования антенн в многоцелевых системах ISAC посредством систем текучих антенн, чтобы одновременно удовлетворить требования производительности коммуникации и многоцелевого восприятия.

Значимость проблемы

1. Требования сетей 6G: ISAC как ключевое инновационное решение для беспроводных сетей 6G требует одновременного обеспечения функций коммуникации и восприятия на общих спектральных ресурсах
2. Использование пространственных ресурсов: Традиционные системы с антеннами в фиксированных позициях (FPA) имеют фундаментальные ограничения в использовании пространственных ресурсов
3. Многоцелевые сценарии: Практические приложения часто требуют одновременного восприятия нескольких целей, что увеличивает сложность проектирования системы

Ограничения существующих методов

1. Ограниченный объем исследований: Существующие исследования FAS в основном сосредоточены на улучшении коммуникации или восприятии одной цели, многоцелевые сценарии недостаточно изучены
2. Сложность оптимизации: Совместная оптимизация формирования луча и позиционирования антенн является высоконевыпуклой задачей, традиционные методы чередующейся оптимизации становятся неосуществимыми при увеличении количества антенн
3. Дискретная обработка: Некоторые исследования рассматривают только активацию портов, а не непрерывную оптимизацию позиционирования антенн

Исследовательская мотивация

На основе указанных ограничений данная работа направлена на разработку схемы интеллектуального позиционирования антенн, способной обрабатывать сценарии многоцелевого восприятия, с использованием глубокого обучения с подкреплением для принятия решений в реальном времени и масштабируемой оптимизации.

Основные вклады

1. Проектирование многоцелевой системы ISAC: Первое систематическое исследование применения FAS в сценариях многоцелевого восприятия, заполняющее пробел в существующих исследованиях
2. Гибридная структура BCD-DRL: Предложена новая структура оптимизации, объединяющая блочный координатный спуск с глубоким обучением с подкреплением
3. Непрерывная оптимизация позиционирования: Реализована непрерывная оптимизация позиционирования антенн, а не только дискретный выбор портов
4. Проверка масштабируемости: Моделирование подтверждает масштабируемость и эффективность метода в многопользовательских многоцелевых сценариях

Подробное описание методов

Определение задачи

Входные данные:

• Область ограничений позиционирования N текучих антенн базовой станции At
• Область ограничений позиционирования одной текучей антенны пользовательского терминала Ar
• Информация о позиционировании K целей восприятия
• Параметры канала и системные ограничения

Выходные данные:

• Оптимизированная матрица формирования луча U
• Позиции текучих антенн базовой станции p = p1, p2, ..., pN
• Позиция антенны пользовательского терминала q

Ограничения:

• Ограничение максимальной передаваемой мощности: Tr(U) ≤ Pmax
• Ограничение коэффициента усиления восприятия: ϖ(p(k)) ≥ Γ, ∀k ∈ K
• Ограничение минимального расстояния между антеннами: ||pα - pβ||2 ≥ Ds
• Ограничение ранга: rank(U) = 1

Архитектура модели

1. Общее проектирование структуры BCD

Алгоритм использует метод блочного координатного спуска, разлагая исходную невыпуклую задачу на две подзадачи:

• Подзадача 1: При фиксированном позиционировании антенн оптимизация матрицы передаваемой ковариации (выпуклая оптимизация)
• Подзадача 2: При фиксированной матрице формирования луча оптимизация позиционирования антенн (решение DRL)

2. Оптимизация матрицы передаваемой ковариации

Для фиксированного позиционирования антенн задача преобразуется в выпуклую оптимизацию путем временного ослабления ограничения ранга:

$\max_{U \succeq 0} \log_2\left(1 + \frac{f(p,q)Uf^{\dagger}(p,q)}{\sigma^2}\right)$

Решение осуществляется с использованием набора инструментов CVX; если ранг решения превышает 1, применяется гауссова рандомизация для восстановления решения ранга один.

3. Оптимизация позиционирования антенн на основе DDPG

Моделирование MDP:

• Пространство состояний: $s_t \in \mathbb{R}^{2(N+1)+3}$, содержащее все координаты антенн и характеристики формирования луча
• Пространство действий: $a_t \in \mathbb{R}^{2(N+1)}$, представляющее дополнительные корректировки позиционирования антенн
• Функция вознаграждения: $r_t = R(s_t, a_t) - \alpha_1\sum_{m=1}^{M}\max(0, \varpi(p^{(m)}) - \Gamma) - \alpha_2\max(0, P_{max} - \text{Tr}(U)) - \alpha_3\frac{1}{N+1}\sum_{i=1}^{N+1}||\Delta p_i||_2$

Архитектура сети:

• Сеть актора: Трёхслойная полносвязная сеть (400-300 нейронов), выходной слой использует активацию tanh и масштабирование
• Сеть критика: Обработка пар состояние-действие, вывод оценки Q-значения
• Целевые сети: Использование политики мягкого обновления для стабилизации обучения

Технические инновации

1. Проектирование пространства состояний: Инновационное объединение информации о пространственной конфигурации и характеристик формирования луча, включая след, максимальное собственное значение и среднее собственное значение
2. Проектирование функции вознаграждения: Многоцелевая функция вознаграждения, одновременно учитывающая скорость коммуникации, ограничения восприятия, ограничения мощности и стоимость перемещения
3. Стратегия исследования: Использование процесса Орнштейна-Уленбека для генерации временно коррелированного шума исследования, подходящего для задач физического управления
4. Непрерывная оптимизация: Реализация истинной непрерывной оптимизации позиционирования, а не дискретного выбора

Экспериментальная установка

Параметры моделирования

• Модель канала: Дальнепольная модель, углы возвышения и азимута θ, ψ независимо и одинаково распределены в 0,π
• Ограничения антенн: Минимальное расстояние D = λ/2, диапазон перемещения A×A, максимальное смещение A = 4λ
• Параметры пути: Количество путей передачи и приёма D = I = 3
• Соотношение мощности: Соотношение мощности LoS к NLoS пути τ = 1
• Параметры сети: Буфер опыта воспроизведения 10000, размер пакета 64, параметр мягкого обновления τ = 0,001

Показатели оценки

• Производительность коммуникации: Средняя скорость коммуникации и максимальная скорость коммуникации (бит/с/Гц)
• Конфигурация системы: Комбинации различного количества антенн N(4,8,12) и целей K(1,3)
• Количество пользователей: Однопользовательский (M=1) и многопользовательский (M=3) сценарии

Методы сравнения

• Базовая линия FPA: Система с антеннами в фиксированных позициях в качестве эталона
• Сравнение различных конфигураций: Сравнение производительности при изменении количества антенн и целей

Результаты экспериментов

Основные результаты

Анализ средней скорости коммуникации:

• FAS значительно превосходит базовую линию FPA во всех конфигурациях
• С увеличением количества целей K ограничения ISAC становятся более строгими, скорость коммуникации снижается
• Даже в многоцелевых сценариях (K>1) скорость коммуникации FAS остаётся выше, чем у однопортовой FPA

Улучшение максимальной скорости коммуникации:

• При SNR 30 дБ и конфигурации N=12 антенн:
  • M=1: 11,64 бит/с/Гц
  • M=3: 14,84 бит/с/Гц
  • Величина улучшения: 27,6%

Проверка масштабируемости

1. Расширение количества антенн: От N=4 до N=12, производительность продолжает улучшаться
2. Адаптация к количеству целей: Эффективная обработка переходов от однопортовых к многоцелевым сценариям
3. Расширение количества пользователей: Значительное улучшение производительности в многопользовательских сценариях

Экспериментальные выводы

1. Значительное преимущество FAS: FAS демонстрирует явное преимущество перед FPA во всех протестированных сценариях
2. Компромисс в многоцелевых системах: Увеличение количества целей восприятия снижает производительность коммуникации, но FAS лучше уравновешивает этот компромисс
3. Хорошая расширяемость: Структура DRL беспрепятственно адаптируется к более сложным многопользовательским средам

Связанные работы

Основные направления исследований

1. Системы текучих антенн: Технология динамического позиционирования антенн, обеспечивающая дополнительную пространственную гибкость
2. Системы ISAC: Технология интеграции коммуникации и восприятия в сетях 6G
3. Глубокое обучение с подкреплением: Приложения оптимизации в беспроводной коммуникации

Связь данной работы с существующими исследованиями

• По сравнению с литературой 8: Явная поддержка нескольких пользователей восприятия вместо одной цели
• По сравнению с литературой 9,10: Реализация непрерывного выбора позиций вместо дискретной активации портов
• Технический вклад: Первое объединение BCD и DRL для решения задачи совместной оптимизации FAS-ISAC

Заключение и обсуждение

Основные выводы

1. Предложенная структура BCD-DRL может эффективно решать задачи оптимизации многоцелевых систем ISAC с поддержкой FAS
2. Алгоритм DDPG успешно реализует совместную оптимизацию формирования луча и позиционирования антенн
3. Результаты моделирования подтверждают масштабируемость и эффективность метода в многоцелевых сценариях

Ограничения

1. Среда моделирования: Исследование основано на моделировании, аппаратные ограничения и сложность моделей каналов при фактическом развёртывании недостаточно учтены
2. Вычислительная сложность: Хотя предложено масштабируемое решение, требования к вычислениям в реальном времени для крупномасштабных систем требуют дальнейшей проверки
3. Робастность: Анализ робастности к ошибкам оценки канала и изменениям окружающей среды ограничен

Направления будущих исследований

1. Аппаратная реализация: Проектирование систем с учётом реальных ограничений оборудования FAS
2. Повышение робастности: Улучшение адаптивности к неопределённости канала и изменениям окружающей среды
3. Крупномасштабное развёртывание: Исследование стратегий оптимизации для более крупных антенных решёток и большего количества пользователей

Глубокая оценка

Преимущества

1. Важность проблемы: Решение ключевых технических проблем в системах FAS-ISAC с важной теоретической и практической ценностью
2. Инновация методов: Проектирование гибридной структуры BCD-DRL является остроумным, органично объединяя выпуклую оптимизацию и обучение с подкреплением
3. Техническая глубина: Разумное моделирование MDP, тщательное проектирование пространства состояний и функции вознаграждения
4. Полные эксперименты: Моделирование в различных конфигурациях подтверждает эффективность и масштабируемость метода

Недостатки

1. Теоретический анализ: Отсутствие теоретического анализа сходимости и сложности
2. Ограниченное сравнение: Основное сравнение с базовой линией FPA, отсутствие сравнения с другими передовыми методами
3. Практические ограничения: Недостаточный учёт инженерных ограничений и ограничений при фактическом развёртывании
4. Анализ чувствительности: Недостаточный анализ чувствительности к выбору гиперпараметров

Влияние

1. Академический вклад: Предоставление новых направлений исследований и технических путей для оптимизации систем FAS-ISAC
2. Практическая ценность: Предоставление справочной информации для проектирования интеллектуальных антенных систем в сетях 6G
3. Воспроизводимость: Подробное описание методов, но код и детальные параметры не опубликованы

Применимые сценарии

1. Системы коммуникации 6G: Особенно подходит для сценариев, требующих одновременной коммуникации и многоцелевого восприятия
2. Интеллектуальный транспорт: Обнаружение нескольких целей и коммуникация в сетях транспортных средств
3. Промышленный интернет вещей: Мониторинг оборудования и передача данных в интеллектуальном производстве
4. Умные города: Развёртывание многофункциональных базовых станций в городской среде

Библиография

Статья цитирует 11 связанных работ, охватывающих ключевые области FAS, ISAC и глубокого обучения с подкреплением, обеспечивая прочную теоретическую основу для исследования.

Общая оценка: Это высокотехнологичная статья, предлагающая инновационное решение для оптимизации систем FAS-ISAC. Хотя есть место для улучшения в теоретическом анализе и рассмотрении практического развёртывания, технические вклады и экспериментальная проверка достаточно полны и оказывают позитивное влияние на развитие соответствующих областей.