ArXiv 2025 | 北航等机构发布最新综述：大语言模型集成（LLM Ensemble）

43 0 0

文章摘要

近年来，大语言模型（LLM）的快速发展推动了LLM Ensemble（大语言模型集成）领域的兴起。LLM Ensemble的核心思想是在下游任务推理阶段，综合多个大语言模型的输出，以发挥各自的优势。这种方法充分利用了不同模型在擅长领域、推理成本与效率等方面的差异，解决了单一模型在准确性、幻觉频发以及与人类意图不对齐等问题上的局限性。

LLM Ensemble方法可以根据“LLM推理”和“集成”的先后顺序分为三大范式：推理前集成、推理时集成和推理后集成。推理前集成方法在模型执行推理前，通过路由算法选择最合适的模型进行推理，类似于集成学习中的硬投票策略。推理时集成方法在模型解码过程中，聚合多个模型的不完整响应，并将结果反馈给所有模型以进行下一轮处理。推理后集成方法则是在所有模型生成完整响应后，综合考虑它们的输出以生成最终回复。

在具体方法上，推理前集成可进一步分为预训练路由器和非预训练路由器；推理时集成则包括分词级集成、片段级集成和过程级集成；推理后集成分为非级联方法和级联方法。这些方法在集成策略、集成粒度和集成目标上各有特点。例如，分词级集成方法在模型解码阶段更精细地利用各个模型的输出概率分布，从而增强集成效果，而级联方法则在综合考虑性能和推理成本的基础上，动态选择最合适的输出。

尽管LLM Ensemble领域已取得显著进展，但仍存在一些挑战和未来研究方向。例如，片段级推理时集成方法需要更具原则性的片段划分策略，以提升整体效果；非级联推理后集成方法需要更精细化的无监督集成策略，以避免对额外生成模型的依赖；级联式推理后集成方法则需要开发适用于生成任务的通用型无监督方案。

LLM Ensemble是集成学习在大语言模型时代的直接体现，其易获取性、开箱即用特性与多样性使得集成学习思想更具活力。通过对7大类方法的全面梳理与总结，本文为相关研究人员提供了有价值的参考，并激发了更多在LLM Ensemble及其相关领域的深入探索。