Parsimony 是一个衡量 AI 编程智能体中多余代码的基准。与解决率/成本指标不同,它衡量净编程单元:语句、调用、比较、名称、字面量等语法元素。它减去删除的代码(净 = 新增 − 删除),并避免按行计数,因此堆砌代码不会得到奖励。模型按其在已解决任务上新增的平均净单元排名,从低到高;失败尝试也计入平均值。已解决数据来自 SWE-bench Verified,不重新运行测试。补丁会被应用,变更文件会被解析;仅限 Python,排除测试、文档、生成文件。它使用相同的 mini-SWE-agent,不过智能体会影响输出。更小并不总是更好:单元衡量的是规模,而非可读性/设计,而且写更多代码的模型往往能解决更多任务。用户可以比较模型、查看排行榜,或通过示例 JSON 提交结果。代码/数据:github.com/La5u/Parsimony。
1976年7月,阿佩尔和哈肯宣布了四色定理的证明,借助一台运行了1200小时、做出了100亿次判断的计算机;约翰·科赫协助了算法。结果引发了激烈争论。一些数学家接受了它;另一些则拒绝这种依赖计算机验证而非人类可核查推理的证明,称其为“神谕”,或说它根本不是数学。年龄也起了作用:年长的数学家怀疑计算机证明,年轻的数学家则怀疑700页手工计算。比尔·图特、海因里希·赫施和特德·斯沃特的高调支持提升了可信度,尽管《纽约时报》最初拒绝报道此事。1979年,托马斯·蒂莫奇科主张,无法通览的证明不是传统证明;斯沃特回应说,计算机辅助证明只是纸笔的延伸。这一事件标志着人机数学的开端,并提出了关于证明中的信任、验证和优雅的持久问题。