GitHub Blog · AI & ML· Michelle Zhou·· 8 小时前精选AI 评分68
GitHub 推出开源 AI 代码审查基准 ReviewBench
ReviewBench: An open benchmark for AI code review
AI 导读
GitHub 发布 ReviewBench,一个用于评估 AI 代码审查系统的开源基准。该基准分析了 103.9M 个 GitHub pull request,涵盖 219 个跨 19 种语言的公开 PR,采用多源 golden set 和统一评估标准,经高级工程师独立验证一致率达 96.6%。
推荐理由
原文给出了 96.6% 专家一致率和多组离线预测与在线实验的对比数据,读者可以据此判断该基准的可信度以及它对自己评估工作的实际价值。
来源:GitHub Blog · AI & ML · github.blog