跳到正文
实时
热点事件历史事件

AI模型成本因语种差异

1 篇报道1 个报道来源20 天前更新

先了解这件事

AI 综述

AI模型处理不同语言时Token消耗量最高可相差17倍,英语及其他主流语言用户成本更低。人工智能语言公平研究联盟称,隐性“分词器税”导致网络内容较少的语言用户需支付更高费用,影响响应速度和上下文容量。联盟建议AI实验室公布各语言评估结果并改进分词器设计以缩小差距。

AI 根据报道生成 · 更新于 20 天前

报道时间线

沿着报道,了解事件的不同侧面。

10月30日
  1. IT之家 · AI
    AI模型使用成本受不同语种影响,Token消耗量最高可相差17倍

    AI模型处理不同语言时Token消耗量最高可相差17倍,英语及其他主流语言用户成本更低。隐性“分词器税”导致网络内容较少的语言用户需支付更高费用,影响响应速度和上下文容量。AI实验室需公布各语言评估结果并改进分词器设计以缩小差距。