Claude 如何识别模型在达到 99% 准确率前的数据泄露

四个 Claude 模型在未被告知存在数据泄露的情况下，准确识别出训练数据中已包含标签信息的特征，指出其会导致模型预测结果失真。在股票价格方向预测任务中，泄露版本的验证准确率高达 97.0%，而非泄露版本仅 51.6%。Claude Haiku、Sonnet、Opus 和 Fable 分别从不同角度指出泄露问题，其中 Fable 明确指出训练集可能包含测试集订单之后的数据。