原问题
：AI大模子的大模的语语言不同过错等  ：英语最重价，此外语言要贵良多

7 月 31 日新闻 ，言不英语言贵用户所运用的同过语言对于大型语言模子（LLM）的用度有很大的影响，可能组成英语运用者以及此外语言运用者之间的最重家养智能边界 。最近的外语一项钻研展现 ，由于 OpenAI 等效率所接管的良多的效率器老本掂量以及计费的方式，英语输入以及输入的大模的语用度要比其余语言低良多，其中简体中文的言不英语言贵用度约莫是英语的两倍，西班牙语是同过英语的 1.5 倍
，而缅甸的最重掸语则是英语的 15 倍。

IT之家留意到 ，外语推特用户 Dylan Patel（@dlan522p）分享了一张照片，良多揭示了牛津大学妨碍的大模的语一项钻研，该钻研发现 ，言不英语言贵让一个 LLM 处置一句缅甸语句子需要 198 个词元（tokens） ，同过而同样的句子用英语写惟独要 17 个词元
。词元代表了经由 API（如 OpenAI 的 ChatGPT 或者 Anthropic 的 Claude 2）碰头 LLM 所需的合计力老本 ，这象征着缅甸语句子运用这种效率的老本比英语句子逾越 11 倍
 。

词元化模子（即家养智能公司将用户输入转换为合计老本的方式）象征着，除了英语之外的其余语言运用以及磨炼模子要贵良多
。这是由于像中文这样的语言有着差距、更重大的妄想（不论是从语法仍是字符数目上） ，导致它们需要更高的词元化率 。好比，凭证 OpenAI 的 GPT3 分词器  ，“你的爱意（your affection）”的词元
，在英语中惟独要两个词元，但在简体中文中需要八个词元 。尽管简体中文文本惟独 4 个字符（你的爱意），而英文有 14 个字符。

【源头 ：IT之家】返回搜狐，魔难更多

责任编纂：

(责任编辑：综合)

• ·10年升4级！终圆英超梦！138年小镇球队厉害了，书写草根足球传奇31岁在春晚一炮而红，观众都以为他隐退了，其实已经去世10年了
• ·前锋没人选了!马德里竞技财务问题，必须抛售球员，曼联抢莫拉塔大学生“毁容式”证件照火了，张张都是经典，肚子都要笑抽筋了
• ·佘汉武：鹰
• ·期待！外媒列今夏五笔焦点转会，凯恩加盟皇马，拜仁尤文互换球星伊万卡未处理就遭暴露的照片：如此真实的身材，真是别有滋味！
• ·起劲备战亚洲杯 中国女篮力争好下场
• ·用大黄蜂去体验音乐的乐趣只有南卡能做到吧“丑娘”张少华称自己是校花，原以为开玩笑，看到照片后信了
• ·惨败曼彻斯特德比!滕哈格重新审视球员，喊停所有续约，再做打算据说每隔100年，就会出现一个一模一样的自己，科学都难以解释
• ·13万级纯电SUV普及者，东风风行雷霆将全面覆盖传统紧凑级SUV？