跳到正文
原文
论文雷锋网转述·· 4 小时前

Google 和 Mercor 的 PLE 揭示了工程智能体的约束瓶颈

91% ≈ 0%?谷歌最新研究,戳破工程 Agent 的高正确率泡沫

谁
Google and Mercor
引文
Google 与 Mercor 近日发布的 Physical-Engineering's Last Exam(PLE),以 85 项机械、电气、土木与结构工程任务量化了这种落差。

发生了什么

Google 和 Mercor 推出的 Physical-Engineering's Last Exam(PLE)评估了 85 项工程任务,发现局部准确率与可行设计交付之间存在差距。Claude Opus 5.5 搭配 Claude Code 在 56 项隐藏测试中得分为 48.3%;在协同创作任务中,它平均满足了 91% 的单项约束,但只有 41.3% 的设计提交满足所有硬性安全与可行性要求。本文探讨了约束耦合、设计状态管理和验证对工程智能体构成的挑战。

接下来读什么

查看这件事的完整进展Google and Mercor Introduce an 85-Task Engineering Benchmark

这件事到目前为止

Google and Mercor introduced Physical-Engineering's Last Exam (PLE), a benchmark of 85 engineering tasks for evaluating AI agents. On 56 hidden tests, Claude Opus 5.5 with Claude Code scored 48.3%. Across co-creation tasks, it satisfied 91% of individual constraints on average, but only 41.3% of design submissions met every hard safety and feasibility requirement. The results point to a gap between meeting constraints one at a time and delivering a viable design that satisfies them all.

每天一封,跟上 AI 的重要变化

模型发布、价格变化、算力进展,附原始来源。免费,确认后开始发送,随时一键退订。 看一份往期日报 · 2026-11-05