在 Databricks 数百万行代码库上对编码智能体进行基准测试
Benchmarking coding agents on Databricks' multi-million line codebase

原始链接: https://www.databricks.com/blog/benchmarking-coding-agents-databricks-multi-million-line-codebase

本网站正在使用安全服务来保护自身免受在线攻击。您刚才的操作触发了安全防御机制。触发此拦截的操作可能有多种,包括提交了特定的词汇或短语、SQL 命令或格式错误的数据。

Hacker News 最新 | 往期 | 评论 | 提问 | 展示 | 招聘 | 提交 登录 在 Databricks 数百万行代码库上对编码智能体进行基准测试 (databricks.com) 12 分,tanelpoder,1 小时前 | 隐藏 | 往期 | 收藏 | 2 条评论 帮助 falaki 27 分钟前 [–] 1) 许多模型目前在顶尖水平上都具有竞争力,包括开源模型。 2) 特别是 GLM 5.2,在开源编码智能体性能方面迈出了重大一步。 3) 测试工具对性价比的影响巨大。 4) Token 单价更低并不意味着任务成本更低。 回复 falaki 27 分钟前 | 父节点 [–] 他们还建议每家公司都应该建立自己的基准测试,并用新模型重复这些测试,而不是依赖 SWE bench。 回复 指南 | 常见问题 | 列表 | API | 安全 | 法律 | 加入 YC | 联系 搜索:
相关文章

原文

This website is using a security service to protect itself from online attacks. The action you just performed triggered the security solution. There are several actions that could trigger this block including submitting a certain word or phrase, a SQL command or malformed data.

联系我们 contact @ memedata.com