何恺明团队发布用于多模态推理的 VISTA 视觉测试框架
何恺明团队发布多模态Harness框架
- 谁
- He Kaiming's team
- 引文
最近,何恺明团队在最新论文《VISTA: A Visual Harness for Reasoning in an Interactive World》中,提出了一套视觉原生的Harness—— VISTA 。
发生了什么
何恺明团队发布了 VISTA,一种视觉原生测试框架,使现有多模态模型能够观察环境、将原始帧存储在上下文之外,并在推理过程中回忆、缩放或检查这些帧,而无需重新训练。搭配 VISTA,Claude Opus 5.0 完成了全部 25 个公开的 ARC-AGI-3 游戏,取得完美的 100 分动作效率得分,所用动作比人类首次游玩基线少 57.4%,而 GPT-5.6 Sol 得分为 99。该团队还测试了浏览器游戏、迷宫和连点成线任务,并将具身任务列为未来工作。
这件事到目前为止
何恺明团队发布了 VISTA,这是一种视觉原生的执行框架,能让现有多模态模型观察环境,将原始帧存储在上下文之外,并在推理过程中回忆、放大或检查这些帧,而无需重新训练。该团队报告称,与 VISTA 配合使用时,Claude Opus 5.0 完成了全部 25 款公开的 ARC-AGI-3 游戏,取得完美的 100 动作效率分数,所用动作比人类首次游玩基线少 57.4%,而 GPT-5.6 Sol 得分为 99。 该团队还在浏览器游戏、迷宫和连点成线任务上测试了 VISTA,并将具身任务列为未来工作。
继续阅读
最新日报 · 第 24 期NVIDIA 与 AI4Bharat 推出 Nemotron-pretraining-Indic-v1 及开放数据生成流水线正在热议
明早 08:00 把这样一份日报发到你邮箱
和上面这份一样:几件值得看的事。免费,点确认信之后才会开始发送,每封信都能一键退订。 看一份往期日报 · 2026-10-17
