Hugging Face · 每日论文·· 4 天前精选AI 评分56
OR-License:评估 LLM 智能体作为真实运筹学实践者的性能
OR-License: Evaluating LLM Agents as Real-World Operations Research Practitioners
AI 导读
研究提出 OR-License 基准,包含 31 个来自 10 个工业场景的真实运筹学任务,总价值 368 万美元,保留原始需求与交付格式。通过 ORSim 模拟客户交互,评估 LLM 智能体在信息获取、方案制定与验证中的表现。
推荐理由
该研究构建了真实业务场景下的 LLM 智能体评估基准,揭示了当前模型在可行性与质量上的差距,为长周期智能体的可靠设计提供实证依据。
来源:Hugging Face · 每日论文 · huggingface.co