跳到正文
原文
Hugging Face Blog·· 18 天前精选AI 评分78

IBM Research 提出 ALTK-Evolve 一致性指南以缩小智能体 Pass^k 与 Mean@k 差距

Your Agent Aced the Task. Will It Do It Again?

AI 导读

IBM Research 在 Hugging Face Blog 发布基于 ALTK-Evolve 的一致性指南方法,通过 Consistency Analyzer 诊断智能体决策点的不稳定性,将 GPT-4.1 ReAct 智能体在 AppWorld 上的 24.4 个百分点一致性差距缩小至 12.0 个百分点。

推荐理由

原文提出 Pass^k 指标与一致性分析器,量化并缩小智能体重复执行时的成功率波动,为生产环境可靠性评估提供新方法。

来源:Hugging Face Blog · huggingface.co