ALTK-Evolve 利用学习得到的记忆,使 GPT-4.1 在零售 τ²-bench 上取得领先成绩
IBM Research 报告称,ALTK-Evolve 会从智能体的训练尝试中提取行为准则,并将其附加到提示中,从而提升客户服务表现,无需更新权重或人工标注。在留出的 τ²-bench 零售任务中,GPT-4.1 的 Pass^4 从 57.5% 提高到 67.5%;较小的准则集对航空任务的可靠性提升最大。其完整基础划分的零售成绩也超过了 2026 年 10 月 12 日排行榜快照中的所有参赛结果。准则增加了输入 token 成本,同时在匹配的成功运行中略微减少了对话轮数。

推荐理由
这些实验提供了一种可迁移的方法,通过学习得到的提示准则提升智能体可靠性,同时表明准则数量与输入 token 成本之间需要根据领域权衡。

