【本文由“成道之子”推荐,来自《中文通常比英文消耗更多的词元(Token),而不是英文消耗更多》评论区,标题为小编添加】
楼主的这个说法,让我回想了1995年前打字机和电脑中的汉字输入问题。
当时完全是按照英语的输入法习惯来处理汉字输入,因此无比笨拙,效率及其低下。
后面,中国人终于按汉字联想的习惯来处理汉字输入问题,反而超过了英文的输入速度。
现在,所谓的 词元Token,继续先把中文转换成英文后再运行的话,那很自然会得出中文通常比英文消耗更多的词元(Token)的谬论来。
这样的因方法论的错误而形成的谬论,其实就是戴帽子批判手法,离题万里, 不值一驳。