HiRA: Иерархическая структура рассуждений для разделённого планирования и выполнения в глубоком поиске

Основная информация

• ID статьи: 2507.02652
• Название: HiRA: A Hierarchical Reasoning Framework for Decoupled Planning and Execution in Deep Search
• Авторы: Jiajie Jin, Xiaoxi Li, Yuyao Zhang, Guanting Dong, Yutao Zhu, Zhao Yang, Hongjin Qian, Zhicheng Dou
• Классификация: cs.AI cs.CL cs.IR
• Время публикации/конференция: 2025 (подано на AAAI 2026)
• Ссылка на статью: https://arxiv.org/abs/2507.02652

Аннотация

Сложные информационные потребности в реальных сценариях поиска требуют глубокого рассуждения и синтеза знаний из нескольких источников, с которыми традиционные конвейеры поиска с увеличением контекста (RAG) справляются неэффективно. Современные методы, основанные на рассуждениях, имеют фундаментальное ограничение: они используют единую модель для одновременного выполнения высокоуровневого планирования и детального исполнения, что приводит к неэффективности рассуждений и ограниченной масштабируемости. В данной работе предлагается HiRA — иерархическая структура, которая разделяет стратегическое планирование и специализированное исполнение. Метод разлагает сложные задачи поиска на сфокусированные подзадачи, назначает каждую подзадачу специализированным агентам, оснащённым внешними инструментами и возможностями рассуждения, и координирует результаты через структурированные механизмы интеграции. Такое разделение предотвращает помехи деталей исполнения высокоуровневому рассуждению, одновременно позволяя системе использовать специализированные знания для различных типов обработки информации. Эксперименты на четырёх сложных кроссмодальных бенчмарках глубокого поиска демонстрируют значительное превосходство HiRA над современными системами RAG и на основе агентов.

Исследовательский контекст и мотивация

Определение проблемы

Традиционные поисковые системы возвращают ранжированные веб-страницы на основе сопоставления ключевых слов, требуя от пользователя ручной фильтрации и сбора информации. Хотя большие языковые модели (LLM) с доступом в интернет могут предоставлять прямые ответы, они обычно используют только прямую информацию из результатов поиска, не обладая глубокими возможностями рассуждения и синтеза.

Значимость проблемы

С взрывным ростом информации в интернете поиск ответов на сложные запросы становится всё более сложным, что стимулирует быстрое развитие задач глубокого поиска, требующих понимания сложных информационных потребностей и синтеза точных ответов из нескольких источников.

Ограничения существующих методов

1. Ограничения монолитной архитектуры: Существующие методы полагаются на единую модель рассуждений для обработки всех задач, используя специальные токены для активации инструментов
2. Ограниченная масштабируемость возможностей: Добавление новых инструментов или возможностей требует тщательного переделывания подсказок и обучения модели новым паттернам токенов
3. Помехи рассуждению: Результаты внешнего исполнения непосредственно вводятся в основную цепь рассуждений, внося шум и нарушая основной процесс рассуждения

Исследовательская мотивация

Авторы полагают, что эффективное исполнение агентом должно следовать иерархической структуре: включая мета-агента для высокоуровневого планирования, координатора для передачи задач рассуждения и специализированных агентов исполнения для конкретных операций.

Основные вклады

1. Иерархическая архитектура рассуждений: Предложена новая иерархическая структура рассуждений, которая интегрирует специализированных агентов рассуждений, усиленных инструментами, как модули, устраняя необходимость в оркестровке внешних инструментов или жёстко определённых конвейеров в существующих методах
2. Улучшенная интеграция возможностей: Специализированные исполнители поддерживают универсальную интеграцию разнообразных возможностей рассуждения и инструментов. Существующие агенты поиска могут быть напрямую интегрированы без инженерии подсказок или переобучения модели
3. Превосходная эмпирическая производительность: Эксперименты на четырёх сложных кроссмодальных задачах поиска показывают значительные улучшения по сравнению с традиционными методами RAG и современными подходами на основе агентов

Подробное описание метода

Определение задачи

Дана сложная задача q, требующая информационного поиска, и предопределённая внешняя среда E. Цель — разработать структуру, которая генерирует окончательное решение, содержащее ответ A и соответствующий процесс рассуждения R. Процесс генерации представляется как:

$P(R, a | q, E) = \prod_{t=1}^{T_R} P(R_t | R_{<t}, q, E_{<t}) \cdot P(a | q, R)$

где $T_R$ обозначает этапы генерации токенов процесса рассуждения, $E_{<t} = \{E(R_{<s})\}_{s<t}$ обозначает набор результатов всех взаимодействий со средой до временного шага t.

Архитектура модели

Структура HiRA содержит три основных модуля:

1. Мета-планировщик рассуждений (Meta Reasoning Planner)

• Отвечает за планирование, рассуждение и генерацию ответов
• Разлагает задачи на высокоуровневые подзадачи со стратегическими инструкциями для экспертных агентов
• Использует специальные токены для динамической генерации подзадач:

$P_M(s_k) = P_M(s_k | q, O_{<t}, \{E(s_j)\}_{j<k})$

2. Адаптивный координатор рассуждений (Adaptive Reasoning Coordinator)

Содержит три основные функции:

Процесс передачи рассуждения: $A^*_k = \arg\max_{A \in E} P_C(O^{(k)}_{dele}, A | s_k, I_E, I_{select})$

Процесс дистилляции рассуждения: $P_C(O^{(k)}_{dist}, R^{(k)}_{dist} | s_k, O^{(k)}_{expert}) = P_C(O^{(k)}_{dist} | O^{(k)}_{expert}, \cdot) \cdot P_C(R^{(k)}_{dist} | O^{(k)}_{dist}, O^{(k)}_{expert}, \cdot)$

Двухканальный механизм памяти: Включает память фактов $M_f$ и память ресурсов $M_r$

3. Специализированные исполнители (Domain-Specialized Executors)

Разработаны на основе трёх ортогональных измерений возможностей агентов:

• Получение информации: Отвечает за получение и интеграцию информации из интернета
• Кроссмодальное понимание: Обрабатывает понимание и слияние кроссмодальной информации
• Вычислительное рассуждение: Обрабатывает математические вычисления, обработку файлов и другие вычислительные задачи рассуждения

Технические инновации

1. Разделённый дизайн: Разделение высокоуровневого стратегического планирования и низкоуровневых деталей исполнения предотвращает помехи шума исполнения процессу планирования
2. Динамическое распределение задач: Интеллектуальный выбор наиболее подходящего экспертного агента на основе сложности задачи и требуемых возможностей
3. Двусторонняя передача рассуждения: Поддерживает делегирование рассуждения от мета-агента к экспертным агентам и обратную дистилляцию рассуждения
4. Модульное расширение: Новые экспертные агенты могут быть беспрепятственно интегрированы без переделывания всей системы

Экспериментальная установка

Наборы данных

1. GAIA: Охватывает многошаговое рассуждение и поиск, использует все образцы валидации (текст, кроссмодальность, на основе файлов)
2. WebWalkerQA: Тестирует навигацию в интернете и извлечение на английском и китайском языках, выборка из 200 вопросов
3. SimpleQA: Оценивает фактические и широкие знания, выборка из 200 вопросов
4. Humanity's Last Exam: Высокосложный бенчмарк, требующий сложного рассуждения и внешнего поиска, использует 500 образцов валидации

Метрики оценки

Точность рассчитывается с использованием Qwen2.5-72B-Instruct в качестве оценивающего LLM

Методы сравнения

1. Прямое рассуждение: Использование встроенных возможностей рассуждения модели (Qwen3-32B, QwQ-32B, DeepSeek-R1-32B, GPT-4o и др.)
2. Односпособное усиление: Использование единственного специализированного инструмента для усиления рассуждения (Search-o1, WebThinker, CodeAct и др.)
3. Многоспособное рассуждение: Интеграция нескольких инструментов или структурированных рабочих процессов (Plan-and-Solve, ReAct)

Детали реализации

• Базовая модель: QwQ-32B
• Координатор: Qwen2.5-Instruct
• Температура: 0.7, top_p: 0.95, top_k: 20
• Окно контекста: 128k токенов
• Максимальное количество подзадач: 10

Результаты экспериментов

Основные результаты

Ключевые находки

1. Общее преимущество производительности: HiRA превосходит все методы-базовые линии на всех задачах
2. Явное преимущество на сложных задачах: Улучшения более значительны на сложных задачах (GAIA, HLE)
3. Преимущества иерархического дизайна: Иерархический дизайн достигает лучшей производительности по сравнению с методами, использующими тот же набор инструментов

Абляционные эксперименты

Анализ эффективности

1. Длина рассуждения: Цепь рассуждений HiRA короче, чем у WebThinker, что указывает на более эффективное вызывание подзадач
2. Количество взаимодействий: HiRA имеет меньше взаимодействий со средой по сравнению с методами прямой интеграции инструментов
3. Вычислительные издержки: Иерархическая структура достигает более целевого использования инструментов

Связанные работы

Эволюция от поиска с увеличением контекста к глубокому поиску

От одношагового поиска к итеративным конвейерам с разложением запросов, уточнением документов и многораундовым поиском. Однако методы RAG полагаются на предопределённые рабочие процессы, ограничивая адаптивное принятие решений.

Методы разделения планирования и исполнения

• Разделение на уровне действий: Назначение исполнителей для одношаговых задач (Plan-Act, CoAct)
• Разделение на уровне запросов: Разложение проблем на более высокой гранулярности (REMA, LLMCompiler)

Данная работа решает ограничения этих методов через динамическую передачу рассуждения и специализированных агентов в иерархической структуре.

Заключение и обсуждение

Основные выводы

HiRA эффективно решает ограничения монолитных моделей в задачах глубокого поиска путём разделения стратегического планирования и специализированного исполнения. Архитектура на основе нескольких агентов поддерживает масштабируемое и модульное рассуждение.

Ограничения

1. Вычислительные издержки: Архитектура на основе нескольких агентов может увеличить вычислительные затраты
2. Сложность координации: Механизмы координации между агентами требуют тщательного проектирования
3. Распространение ошибок: Ошибки в исполнении подзадач могут влиять на общую производительность

Будущие направления

1. Дальнейшая оптимизация механизмов координации между агентами
2. Исследование большего количества специализированных исполнителей для конкретных областей
3. Изучение стратегий динамического выбора агентов

Глубокая оценка

Преимущества

1. Инновационный дизайн архитектуры: Иерархический разделённый дизайн имеет теоретическую и практическую ценность
2. Комплексная экспериментальная верификация: Систематическая оценка на нескольких сложных бенчмарках
3. Высокая практичность: Структура поддерживает беспрепятственную интеграцию существующих агентов
4. Глубокий анализ: Предоставляет подробные абляционные эксперименты и анализ эффективности

Недостатки

1. Выбор методов сравнения: Некоторые методы-базовые линии могут быть не самыми современными SOTA
2. Ограничения оценки: Главным образом использует LLM-as-Judge, что может привести к предвзятости оценки
3. Верификация масштабируемости: Отсутствует верификация в более крупных масштабах или большем количестве областей

Влияние

1. Академический вклад: Предоставляет новую парадигму проектирования для систем рассуждения на основе нескольких агентов
2. Практическая ценность: Может быть напрямую применена к сценариям сложного информационного поиска
3. Воспроизводимость: Предоставляет подробные детали реализации и код

Применимые сценарии

1. Системы сложного вопросно-ответного взаимодействия, требующие многошагового рассуждения
2. Поиск и синтез кроссмодальной информации
3. Задачи исследования и анализа, требующие специализированной поддержки инструментами
4. Системы управления знаниями и поддержки принятия решений на уровне предприятия

Библиография

Статья ссылается на множество важных работ, включая основополагающие работы по RAG (Lewis et al. 2020), современные модели рассуждения (OpenAI o1, DeepSeek-R1) и связанные исследования многоагентных систем. Эти ссылки отражают глубокое понимание авторами траектории развития области.

Общая оценка: Это высококачественная исследовательская статья, которая предлагает инновационную иерархическую структуру рассуждений с достаточно твёрдым теоретическим дизайном и экспериментальной верификацией. Данная работа имеет важное значение для развития систем рассуждения на основе нескольких агентов, особенно с широкими перспективами применения в области сложного информационного поиска.