跳到正文
热点事件持续更新

Scikit-Learn与Jev在BANKING77数据集上校准效果对比

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

Ankur Tomar在BANKING77数据集上的对比实验显示,使用温度缩放的scikit-learn逻辑回归模型,在77类任务上的校准效果优于TypeSafe AI的Jev模型(预期校准误差ECE分别为0.031和0.065),在7类任务上效果相当(ECE为0.022和0.014)。 实验基于一个简短的英文银行查询数据集,使用TF-IDF特征。作者称,Jev的测试样本量较小,且如果Jev在训练中见过BANKING77数据,其准确率数字可能偏乐观。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月11日
  1. Towards Data Science
    Scikit-Learn 在 BANKING77 数据集上校准表现与 Jev 模型对比

    作者使用 scikit-learn 实现的逻辑回归模型与 TypeSafe AI 的 Jev 模型在 BANKING77 数据集上进行校准效果对比,发现温度缩放的逻辑回归在7类任务上与Jev的校准效果相当(ECE 0.022 vs 0.014),在77类任务上表现更优(0.031 vs 0.065)。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。