Nathan Lambert认为，顶尖模型之间AA分数的微小差异不如实际可用性重要

1篇报道 1个报道来源 2 小时前更新

先了解这件事

AI 综述

Nathan Lambert表示，在顶尖模型中，实际可用性远比AA分数相差两分（无论高低）重要，并认为3.1在实际使用中可能表现令人失望。 Lambert将AA描述为衡量潜力的指标，并表示，要了解这种潜力如何转化为模型的实用性，需要时间。他以Opus 5和5.5为例，说明模型在实际使用中可能表现出色，也可能不尽如人意。

AI 根据报道生成 · 2 小时前更新

最新进展10月24日 20:14

Nathan Lambert表示，实际可用性比AA分数的微小差异更重要 Nathan Lambert · X

接下来读什么

今日还有哪些重要变化Kimi K3.1 Pro 在 Artificial Analysis 排名第四，逼近 Claude Opus 5.5

报道时间线

沿着报道，了解事件的不同侧面。

10月24日

20:14
Nathan Lambert · X
Nathan Lambert表示，在模型高端领域，现实世界中的可用性远比AA分数相差几分重要
在顶尖模型中，现实世界中的可用性远比AA分数相差±2分重要得多。对模型来说，这需要一段时间才能理解：AA有点像潜力，但有些模型能达到，有些则达不到（例如 opus 5 和 5.5）。看来 3.1 可能更接近未能达到的那一侧。https://twitter.com/fawnunwrap/status/2113693298800074801

模型发布、价格变化、算力进展，附原始来源。免费，确认后开始发送，随时一键退订。看一份往期日报

本事件热度走势

还没有足够的连续观测数据，暂不绘制趋势。