Cross-Question Method Reuse in Large Language Models: From Word-Level Prediction to Rational Logical-Layer Reasoning

基本信息

• 论文ID: 2509.05660
• 标题: Cross-Question Method Reuse in Large Language Models: From Word-Level Prediction to Rational Logical-Layer Reasoning
• 作者: Hong Su (成都信息工程大学计算机科学学院)
• 分类: cs.CL (计算语言学)
• 发表期刊: Journal of LaTeX Class Files, Vol. 14, No. 8, August 2015
• 论文链接: https://arxiv.org/abs/2509.05660v2

摘要

大型语言模型(LLMs)已被广泛应用于协助解决各种问题。先前的工作提出将方法表示为问题及其对应解决方案的配对，以实现方法重用。然而，现有方法通常要求问题之间具有高度相似性。本文扩展了方法重用的范围，以处理相似性较低或具有隐含相似性的问题。对于在一般-特定意义上相似的问题，作者提出首先分离问题和解决方案，而不是直接将配对输入LLM。然后引导LLM将解决方案适应到新的相关问题上，使其专注于解决方案转移而非问题识别。此外，该方法还扩展到仅共享部分特征或隐藏特性的问题。实验验证表明，该范围扩展方法提高了筛选出可重用解决方案的概率，从而改善了跨问题方法重用的有效性。

研究背景与动机

问题定义

传统的大型语言模型主要在词级别进行训练，通过预测下一个token或填充缺失token来学习。这种训练方式主要反映统计共现性，而非高层次的逻辑推理，更像是直觉或模式匹配而非理性决策。

研究动机

1. 词级推理的局限性：当前基于transformer的LLMs在方法级推理上存在困难，容易偏好训练数据中频繁出现的方法，即使这些方法并非最优。
2. 方法重用的局限性：现有的方法重用框架要求问题之间具有高度相似性，限制了其应用范围。
3. 跨领域知识迁移需求：人类能够将一个问题的解决方案类比应用到看似无关的新问题上，但现有LLMs缺乏这种跨问题的方法重用能力。

核心挑战

如何使LLMs能够在问题间相似性较低甚至没有明显关联时，仍能有效地重用已有的解决方案。

核心贡献

1. 扩展方法重用范围：将方法重用从高相似性案例扩展到一般-特定映射和基于特征的隐藏关系。
2. 提出跨问题方法重用模型：
   • 关系型重用：处理一般-特定关系和并行关系
   • 特征型重用：支持部分特征匹配和隐藏特性识别
3. 引入"方法的方法"(Method of Methods, MoM)概念：提供高层次方法来验证、改进和提升当前应用方法的有效性。
4. 理论框架：从词级预测提升到逻辑层推理，实现理性而非纯统计的解决方案应用。

方法详解

任务定义

给定一个目标问题Qt，在没有直接解决方案的情况下，从已有的方法库中找到可重用的解决方案，即使这些方法的原始问题与目标问题相似性较低或存在隐含关系。

模型架构

1. 关系型方法重用

一般-特定方法： 设两个方法Ma和Mb分别解决问题集合Qma和Qmb，如果满足：

Qma ⊃ Qmb  (1)

则Ma比Mb更一般，可以进行垂直重用。

并行方法： 两个方法并行当且仅当它们的问题集合是同一更广泛类别的不相交子集：

Qma ∩ Qmb = ∅, Qma ⊂ Qg, Qmb ⊂ Qg  (2)

2. 特征型方法重用

特征空间定义： 对于问题Q，其特征定义为：

F(Q) ⊆ F, F(Q) = Fmeas(Q) ∪ Ftext(Q)  (3)

其中Fmeas(Q)是显式数值属性，Ftext(Q)是通过学习编码器h(·)从文本中提取的特征。

特征相似性：

Simfeat(Qa, Qb) = S(F(Qa), F(Qb))  (5)

重用条件：

Reusefeat(Qb; Sa) = {
    1, if Simfeat(Qa, Qb) ≥ τ and Valid(Sa, Qb) = 1
    0, otherwise
}  (6)

3. 全局方法

全局方法Gi = (Qgi, Sgi)具有广泛适用性，可以作为通用程序增强来提高方法执行的可靠性和一致性。

4. 方法的方法(MoM)

MoM按深度分层组织：

• M(0)：直接方法，Q ↦ S
• M(1)：一阶方法，M(0) ↦ M(0)'
• M(i+1)：(i+1)阶方法，M(i) ↦ M(i)'

技术创新点

1. 问题-解决方案分离策略：不直接将问题-解决方案对输入LLM，而是先分离再引导LLM进行解决方案迁移。
2. 多层次相似性识别：
   • 显式特征匹配
   • 隐藏特性推断
   • 整体方法模板重用
3. 分层验证机制：通过Valid函数确保解决方案在新语境下的逻辑有效性。

实验设置

数据集

实验使用两类测试场景：

1. 关系型重用测试：香蕉新鲜度判断问题，重用水果新鲜度的一般方法
2. 特征型重用测试：硬盘使用时间重置问题，重用MP3文件处理经验

评价指标

• 余弦相似度：测量生成解决方案与目标方法的对齐程度
• 统计显著性检验：使用独立样本t检验评估方法间差异

对比方法

1. RelaMethod vs CompareRela：评估关系型重用效果
2. featureMethd vs compareMP3Method：评估特征型重用效果

实现细节

• 每种方法测试20轮
• 使用Welch's t检验进行统计分析
• 仅比较与目标方法相关的文本段落以减少噪声

实验结果

主要结果

关系型重用实验：

• RelaMethod平均相似度：0.4835 (标准差：0.0801)
• CompareRela平均相似度：0.2820 (标准差：0.0558)
• t值：9.23，p值：8.98×10^-11 (p < 0.05)
• 结论：RelaMethod显著优于baseline方法

特征型重用实验：

• featureMethd平均相似度：0.2945 (标准差：0.0698)
• compareMP3Method平均相似度：0.3983 (标准差：0.0670)
• t值：-4.80，p值：2.52×10^-5 (p < 0.05)
• 结论：两种方法存在显著差异

对比分析

实验发现

1. 关系型重用更稳定：依赖于结构性连接的关系型重用比基于部分重叠的特征型重用表现更稳定。
2. 显式分离的效果：明确提示LLM生成问题-解决方案对比直接提供材料更有效。
3. 统计显著性：关系型重用的统计分离更强（t值9.23 vs 4.80），表明效果更可靠。

理论分析

逻辑层重用

传统LLMs在token级别学习分布P(wt+1|w1,w2,...,wt)，主要捕获统计共现模式。本框架通过方法M=(Q,S)的表示，实现了逻辑层的重用映射：

R: (Qa, Sa) → (Qb, Sa)  (15)

理性重用

不同于基于token概率的选择，方法重用基于逻辑适用性：

Preuse(Ss|Qt) ∝ Simlogic(Qt, Qs) · I[Ss valid]  (19)

确保重用基于逻辑可转移性而非统计频率。

相关工作

LLM推理研究

• 链式思考提示：通过生成中间步骤改善推理性能
• 自一致性：通过多路径采样提高鲁棒性
• 思维树/图：扩展到更复杂的搜索结构

方法表示与重用

• 符号AI：将知识分解为可重用组件
• 程序综合：重用抽象操作符解决新任务
• 案例推理(CBR)：通过类比解决新问题

迁移学习与元推理

• 预训练模型：T5、GPT-4等的任务迁移能力
• 检索增强提示：通过检索相似例子指导推理
• 反思机制：迭代自反馈改进

结论与讨论

主要结论

1. 跨问题方法重用框架成功扩展了LLM的应用范围，使其能够处理相似性较低的问题。
2. 关系型重用在处理一般-特定依赖时表现更稳定，特征型重用为处理隐含重叠提供了补充机制。
3. 结构化的问题-解决方案分离策略显著提高了方法重用的有效性。

局限性

1. 特征型重用效果有限：相比关系型重用，特征型重用的改进幅度较小。
2. 验证机制依赖：Valid函数的实现可能影响重用效果。
3. 计算复杂度：大规模特征空间的相似度计算可能较为耗时。

未来方向

1. 改进特征提取和相似性计算方法
2. 开发更智能的验证机制
3. 扩展到更复杂的多步骤问题解决场景

深度评价

优点

1. 创新性强：首次系统性地解决了LLM中低相似性问题的方法重用问题
2. 理论基础扎实：提供了从词级预测到逻辑层推理的理论框架
3. 实验设计合理：通过具体案例验证了方法的有效性
4. 实用价值高：为LLM的实际应用提供了新的思路

不足

1. 实验规模有限：仅在两个特定场景下进行了验证，缺乏大规模实验
2. 特征定义模糊：特征空间的构建缺乏系统性指导
3. 计算效率未评估：未分析方法的计算开销和可扩展性
4. 对比方法单一：缺乏与其他先进方法的对比

影响力

1. 理论贡献：为LLM推理能力的提升提供了新的理论视角
2. 实践价值：可应用于需要跨领域知识迁移的实际场景
3. 启发性：为后续研究提供了有价值的方向

适用场景

1. 知识迁移：需要将一个领域的解决方案应用到另一个领域
2. 创新问题解决：面对全新问题时寻找类比解决方案
3. 教育辅助：帮助学习者理解不同问题间的内在联系
4. 专家系统：构建能够灵活应用已有知识的智能系统

参考文献

1. Wei, J. et al. "Chain-of-thought prompting elicits reasoning in large language models." NeurIPS 2022.
2. Wang, X. et al. "Self-consistency improves chain of thought reasoning in language models." arXiv 2022.
3. Yao, S. et al. "Tree of thoughts: Deliberate problem solving with large language models." NeurIPS 2023.
4. Su, H. "Method-based reasoning for large language models: Extraction, reuse, and continuous improvement." arXiv 2025.

总体评价：本文提出了一个创新的跨问题方法重用框架，成功扩展了LLM在低相似性场景下的应用能力。虽然在实验规模和某些技术细节上还有改进空间，但其理论贡献和实用价值使其成为LLM推理研究领域的重要工作。