Hacker News · AI· lasu·· 2 小时前AI 评分46
Parsimony – 一个开源基准,用于衡量 AI 模型添加的代码量
Show HN: Parsimony – an open-source benchmark for how much code AI models add
AI 导读
Parsimony 是一个开源基准,用于评估 AI 模型在代码补全任务中添加的代码量。该基准通过统计语法元素(如语句、调用、比较、名称和字面量)的净增量来衡量代码复杂度,而非单纯计算代码行数。目前仅针对 Python 代码进行测量,且基于 SWE-bench Verified 的已发布结果进行排名,不重新运行测试。
来源:Hacker News · AI · parsimony.lasu.dev