跳到正文
Solidot·· 3 小时前AI 评分37

研究发现非英语的 token 成本更高

AI 导读

AI 模型处理非英语提示所需的 token 数量显著高于英语,导致小语种用户面临更高的成本。研究显示,最昂贵语言的 token 使用量是便宜语言的 1.5-5 倍,扩展至 200 种语言后,差距扩大至 17 倍。token 数量增加会带来更高的延迟和更低的有效上下文容量,对计算资源有限的地区影响尤为明显。

来源:Solidot · solidot.org