JioHotstar 对 AI 编码智能体的知识库检索方法进行基准测试

JioHotstar 对六种帮助 AI 编码智能体处理大型代码库的方法进行了基准测试，发现结构化代码搜索在明确的工程任务中表现良好，而语义检索在模糊需求中更有帮助。实验使用 Claude Sonnet 作为解决模型，评估了任务准确率、token 消耗、智能体轮次和工具可用性，结果显示没有一种检索方法在所有任务中都表现最佳。团队建议根据任务特性选择结构化搜索或语义检索，并保留文件系统工具作为基准。