Aran Komatsuzaki做的统计,《苦涩的教训》一文如果翻译成不同语种,他们的 token 对比。以openai的英文版本作为基准(也就是图中的1)。国内模型对中文都做了优化,会省token。Gemini和qwen的多语种优化做的最好。而Claude则相反。。总体来说,小众语言是有token税的……
AI创造营How I AI


Aran Komatsuzaki做的统计,《苦涩的教训》一文如果翻译成不同语种,他们的 token 对比。以openai的英文版本作为基准(也就是图中的1)。国内模型对中文都做了优化,会省token。Gemini和qwen的多语种优化做的最好。而Claude则相反。。总体来说,小众语言是有token税的……
AI创造营How I AI


作者最新文章
热门分类
科技TOP
科技最新文章