跳到正文
热点事件持续更新

淘宝MNN团队开源手机端小模型MNN-Pocket-0.3B

1 篇报道1 个报道来源5 小时前更新

先了解这件事

AI 综述

淘宝MNN团队开源了面向手机端的小型语言模型MNN-Pocket-0.3B,据称在iPhone 18 Pro上离线运行平均解码速度可达350 token/s。 该模型参数约3亿,支持中英文,其INT4部署文件大小为173MB,峰值内存低于300MB。团队提供了从预训练、后训练到端侧部署的多个版本,包括用于端侧部署的量化版本和用于加速推理的投机解码草稿模型。

AI 根据报道生成 · 5 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月6日
  1. IT之家精选
    淘宝MNN团队发布0.3B手机模型MNN-Pocket-0.3B,iPhone 18 Pro离线跑出350 token/s

    淘宝MNN团队发布MNN-Pocket-0.3B模型,面向手机端应用设计,参数约3亿,支持中英文,INT4部署文件173MB,峰值内存低于300MB。在iPhone 18 Pro上离线运行,平均解码速度达350 token/s。

本事件热度走势

可比范围当前
9
可比范围峰值
1011月6日 13:00
近 24 小时变化
–

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。