HuggingFace Daily Papers· Lingxiao Tang, Wei Tao, Yiwen Guo, Lingfeng Bao·· 6 天前精选AI 评分65
训练整个智能体，而非仅训练模型
Training the Whole Agent, Not Just the Model
AI 导读
研究人员提出HarnessAdapt-RL方法，在强化学习过程中同时训练智能体策略并适应其工具链。在9B基础模型上，该方法在SWE-bench Verified、Multilingual和Pro基准上分别比GRPO提高9.8、12.6和6.4个百分点，优于人工设计的OpenHands工具链。机制级技能的提升在评估后移除仍能保持，但部署时移除工具和 hooks 会损失最多7.7个百分点性能。
推荐理由
训练智能体时同时优化模型与工具链，比单独训练模型提升近10个百分点，但部署时需移除部分技能以保持性能。
来源：HuggingFace Daily Papers · arxiv.org