Hugging Face Blog·· 18 天前精选AI 评分78
IBM Research 提出 ALTK-Evolve 一致性指南以缩小智能体 Pass^k 与 Mean@k 差距
Your Agent Aced the Task. Will It Do It Again?
AI 导读
IBM Research 在 Hugging Face Blog 发布基于 ALTK-Evolve 的一致性指南方法,通过 Consistency Analyzer 诊断智能体决策点的不稳定性,将 GPT-4.1 ReAct 智能体在 AppWorld 上的 24.4 个百分点一致性差距缩小至 12.0 个百分点。
推荐理由
原文提出 Pass^k 指标与一致性分析器,量化并缩小智能体重复执行时的成功率波动,为生产环境可靠性评估提供新方法。
来源:Hugging Face Blog · huggingface.co