人工智能研究
避免LLM智能体在生产环境中崩溃的噪声技巧
当前的LLM智能体在现实世界的随机性面前不堪一击。NoisyAgent在训练过程中让它们暴露于受控噪声中,从而提升了鲁棒性和通用基准性能。该论文指出,该领域可能已在无噪声条件上过拟合。

实验室演示与生产环境智能体之间的差距归结为一点:现实世界是混乱的。基准测试的是清晰的指令和完美的工具响应。真实用户输入模糊。API返回错误。工具在调用中连接中断。训练于一种现实的智能体在另一种现实面前畏缩不前。
来自美团LongCat小组的预印本学会在噪声中行动:通过噪声环境增强智能体鲁棒性 探讨了这一不匹配问题。该论文于2025年5月下旬在Hugging Face上发布,介绍了NoisyAgent,这是一种框架,通过向训练环境中注入两种特定噪声源, , 用户噪声和工具噪声,并随着智能体学习应对而逐步增强两者。 桌面AI代理的真正瓶颈不是模型,而是技能库
交互噪声的两个方面
作者们识别出一个核心问题:训练环境是一个被精心维护的温室。任务指令明确无误,工具总是返回预期数据。智能体学会了读取干净信号并执行完美链条。但当遇到一个输入“修复表格”而没有上下文的真实用户,或一个超时的天气API,这个链条就会断裂。 IFBench:测试AI指令遵循能力的新基准
他们定义了两类噪声:
- 用户噪声捕捉模糊性、拼写错误、缺失参数以及表述变化。论文通过在训练过程中向用户交互模式注入扰动来模拟这一点。
- 工具噪声模拟执行失败:超时、格式错误的响应、意外的错误代码、不一致的输出模式。团队在环境中模拟工具异常,以便智能体在部署前看到失败情况。
其洞察不只是噪声本身有帮助。如何施加噪声决定了智能体是学会韧性还是陷入混乱。 验证地平线:为什么验证编码代理现在比构建它们更难
渐进硬化,而非淹没
NoisyAgent采用了两部分稳定机制。首先,噪声仅应用于部分训练轮次,而非全部。智能体仍能看到足够多的干净轨迹以锚定其学习。其次,噪声难度逐步升级:智能体从小的扰动开始,随着适应,面对更大的挑战。作者称之为环境不确定性的课程式安排。
在论文详细描述的实验中,经过NoisyAgent训练的智能体在噪声和干净基准上都优于标准智能体。这一点很重要:暴露于不完美并不会牺牲理想条件下的性能。似乎它教会了智能体进行更广泛的鲁棒推理,而不仅仅是应对噪声。 OPID为语言智能体提供密集奖励信号,告别外部记忆依赖
这篇文章当下为何重要
LLM智能体领域已经看到了一波基准测试的浪潮:AgentQ、AgentBench、WebArena、SWE-Bench,每一个都测试更复杂的多步工具使用。但从业者不断抱怨,在这些基准上表现优异的智能体在生产负载下却崩溃。这篇论文重新定义了问题:基准环境太干净了,而训练循环已经对那种清洁度产生了过拟合。 AI 代理无法在没有构建服务器干预的情况下完成 Java 迁移
NoisyAgent并非鲁棒化方面的首次尝试。对抗训练和域随机化是强化学习和计算机视觉中的成熟技术。但将其应用于具有明确用户和工具噪声分类的语言智能体是新颖的。论文将自己定位在同一研究社区的并行工作之中,包括EnvFactory(合成可执行环境)和CoEvolve(智能体-数据协同进化),表明了一场向着在对抗性真实条件下训练智能体的更深层运动。
开放性问题和注意事项
预印本目前未发布模型权重或训练代码。实验在模拟环境而非生产系统上进行。噪声模型的真实性, , 合成用户模糊性在多大程度上匹配真正的人类模糊性, , 仍然是一个悬而未决的问题。论文也未涉及渐进噪声训练的计算成本,当每次训练轮次需要模拟工具故障或用户变化时,该成本可能不小。
尽管如此,其核心论点难以驳斥。智能体社区一直在追逐基准,因为基准是清晰的。本文暗示,通过基准并非最终目标。在部署环境中存活才是。NoisyAgent为训练这种存活能力提供了一条具体途径。 AI代理正在改写网络安全规则
完整论文可在Hugging Face上以ID 2605.27209查阅。
每天早晨用 3 分钟掌握科技要闻
每个工作日一封邮件,只讲真正重要的 AI 与科技动态。