跳到正文
Hacker News · AI· rkovashikawa·· 3 小时前AI 评分53

Nubank 通过模拟测试将 AI 智能体更新周期从 3 周缩短至 5 天内

Paper: Nubank cuts AI agent update cycles from 3 weeks to under 5 days

AI 导读

Nubank 在其卡务智能体上采用 Snowglobe 模拟器进行候选智能体筛选,通过合成客户和模拟工具输出实现多步工作流测试,避免生产环境风险。该方法在 4 个部署版本中验证了模拟与生产评分高度相关,A/B 测试显示交易型净推荐值提升 36.69 点,自助服务率提升 8.82 个百分点,且未显著影响 tNPS。模拟支持对模型、推理设置和提示词的广泛探索,使原本难以通过真实实验实现的优化成为可能。

来源:Hacker News · AI · arxiv.org