跳到正文
原文
论文量子位当事人· henry·· 6 天前

何恺明团队发布用于多模态推理的 VISTA 视觉测试框架

何恺明团队发布多模态Harness框架

谁
He Kaiming's team
引文
最近,何恺明团队在最新论文《VISTA: A Visual Harness for Reasoning in an Interactive World》中,提出了一套视觉原生的Harness—— VISTA 。

发生了什么

何恺明团队发布了 VISTA,一种视觉原生测试框架,使现有多模态模型能够观察环境、将原始帧存储在上下文之外,并在推理过程中回忆、缩放或检查这些帧,而无需重新训练。搭配 VISTA,Claude Opus 5.0 完成了全部 25 个公开的 ARC-AGI-3 游戏,取得完美的 100 分动作效率得分,所用动作比人类首次游玩基线少 57.4%,而 GPT-5.6 Sol 得分为 99。该团队还测试了浏览器游戏、迷宫和连点成线任务,并将具身任务列为未来工作。

这件事到目前为止

何恺明团队发布了 VISTA,这是一种视觉原生的执行框架,能让现有多模态模型观察环境,将原始帧存储在上下文之外,并在推理过程中回忆、放大或检查这些帧,而无需重新训练。该团队报告称,与 VISTA 配合使用时,Claude Opus 5.0 完成了全部 25 款公开的 ARC-AGI-3 游戏,取得完美的 100 动作效率分数,所用动作比人类首次游玩基线少 57.4%,而 GPT-5.6 Sol 得分为 99。 该团队还在浏览器游戏、迷宫和连点成线任务上测试了 VISTA,并将具身任务列为未来工作。

继续阅读

最新日报 · 第 24 期NVIDIA 与 AI4Bharat 推出 Nemotron-pretraining-Indic-v1 及开放数据生成流水线

正在热议

  1. 1Meta 开放发布 Muse Spark Open,支持 Mac 和云端部署,位居美国开放权重模型榜首
  2. 2Google 在全球推出 Gemini 4 Argon,并扩大付费访问范围,基准测试结果不一
  3. 3OpenAI 为 ChatGPT 中的 GPT-6 Astra Pro 带来并行智能体和更快响应
  4. 4Meta的新商业条款引发有关网站抓取和 AI 训练权利的争议

明早 08:00 把这样一份日报发到你邮箱

和上面这份一样:几件值得看的事。免费,点确认信之后才会开始发送,每封信都能一键退订。 看一份往期日报 · 2026-10-17