跳到正文
热点事件持续更新

研究称AI模型不同语言Token消耗最高相差17倍

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

人工智能语言公平研究联盟发布的一项研究显示,AI模型处理不同语言时,Token消耗量最高可相差17倍,形成隐性的“分词器税”。 消耗的Token增多会导致费用上涨、响应变慢以及有效上下文减少,对网络内容较有限的地区影响尤为严重。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月30日
  1. IT之家·人工智能
    研究称 AI 模型不同语言 Token 消耗最高相差 17 倍

    人工智能语言公平研究联盟发布的一项研究显示,AI 模型处理不同语言时,Token 消耗量最高可相差 17 倍,形成隐性的“分词器税”。消耗的 Token 越多会导致费用上涨、响应变慢以及有效上下文减少,对网络内容较有限的地区影响尤为严重。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。