跳到正文
K = 0.731订阅

Epoch AI Updates Its Capabilities Index with a Bayesian Method

1篇报道 1个报道来源 2 小时前更新

中文版本尚未就绪 · 显示原文

先了解这件事

AI 综述

Epoch AI updated the Epoch Capabilities Index (ECI) to use a Bayesian methodology, improving uncertainty estimates and enabling more accurate model comparisons even when individual uncertainty intervals overlap. Epoch AI said scores for frontier models stronger than GPT-4 changed by less than 1 ECI point on average.

AI 根据报道生成 · 17 分钟前更新

最新进展11月5日 05:31
We’ve updated the Epoch Capabilities Index (ECI) to use a Bayesian methodology. This improves uncertainty estimates and lets us compare models more accurately, even when their individual ECI uncertainty intervals overlap. Frontier model scores are largely unchanged: models stronger than GPT-4 move by less than 1 ECI point on average.Epoch AI · X

接下来读什么

今日还有哪些重要变化Hugging Face 提议为 Transformers 制定模型集成契约

报道时间线

沿着报道，了解事件的不同侧面。

11月5日
  1. Epoch AI · X
    我们已更新 Epoch Capabilities Index (ECI)，改用贝叶斯方法。这改进了不确定性估计，使我们能够更准确地比较模型，即使各模型各自的 ECI 不确定性区间存在重叠。前沿模型的分数基本保持不变：强于 GPT-4 的模型平均变动不到 1 个 ECI 点。

    我们已更新 Epoch Capabilities Index (ECI)，改用贝叶斯方法。这改进了不确定性估计，使我们能够更准确地比较模型，即使各模型各自的 ECI 不确定性区间存在重叠。 前沿模型的分数基本保持不变：强于 GPT-4 的模型平均变动不到 1 个 ECI 点。

每天一封，跟上 AI 的重要变化

模型发布、价格变化、算力进展，附原始来源。免费，确认后开始发送，随时一键退订。 看一份往期日报

本事件热度走势

还没有足够的连续观测数据，暂不绘制趋势。