跳到正文
LangChain 博客·· 2026-08-27AI 评分38

Evaluating OpenWiki with WikiBench

Evaluating OpenWiki with WikiBench

AI 导读

WikiBench 用于评估 OpenWiki 生成和维护代码库文档的效果,通过“阅读代理”判断生成的维基是否有助于回答基于代码库的问题。该基准测试在 Harbor 框架上运行,生成两类问题:覆盖问题和检索问题,并为每个问题提供包含预期事实的 JSON 评分标准。测试结果显示,使用 OpenWiki 0.3.0 与源代码结合时,阅读代理的平均得分最高,且成本低于仅使用源代码的情况。

来源:LangChain 博客 · langchain.com