大模型推理的论文被COLM 2026接收
点击次数:
发布时间:2026-07-09
发布时间:2026-07-09
文章标题:大模型推理的论文被COLM 2026接收
内容:
针对大语言模型复杂推理高度依赖专家标注数据和外部验证器的问题,本文提出无监督推理自演化框架 AERO(Autonomous Evolutionary Reasoning Optimization)。该方法通过自提问、自回答与自批判构建协同双循环,实现模型的自主推理进化;结合基于熵的“最近发展区”定位机制,聚焦最具学习价值的可解性间隙,并利用独立反事实纠错提升验证鲁棒性。同时,设计交错式训练策略以协调不同功能角色的能力增长,避免课程坍塌。在涵盖三大领域的九个基准上,AERO 在 Qwen3-4B-Base 和 Qwen3-8B-Base 上分别取得平均 4.57% 和 5.10% 的性能提升,整体优于现有竞争方法。
该论文被国际会议COLM接收,第一作者为高智韬。Conference on Language Modeling(Conference on Language Modeling,COLM)是国际人工智能领域专注于大语言模型研究的新兴高水平学术会议,创办于2024年。会议聚焦语言模型的预训练与后训练、推理、智能体、检索增强生成(RAG)、多模态大模型、模型对齐、安全与评测等前沿方向,吸引了全球高校及 OpenAI、Google DeepMind、Meta、Microsoft 等机构的广泛参与。凭借鲜明的研究定位和较高的学术影响力,COLM 已成为大语言模型领域最具代表性的国际会议之一。

