EP005. AI、Token 与 Agent:语言、翻译与思维的隐秘缝隙金酒半杯

EP005. AI、Token 与 Agent:语言、翻译与思维的隐秘缝隙

41分钟 ·
播放数170
·
评论数40

为什么到了 AI 时代,英文继续沿用 token 和 agent 这些旧词,中文却造出了“词元”和“智能体”这样的新名字?从游戏代币、FBI 特工、航天飞机和病毒载体,到大模型的分词、工具调用与思维链,这一期我们从词语的多义性出发,聊到不同语言如何铺设不同的“语义地图”。

语言不一定决定我们能想到什么,却可能影响我们先注意什么、习惯从哪里进入一个概念,以及哪条推理路径走起来更顺。

借着《巴别塔》的银条、thinking for speaking,以及“如果你不在桌边,你就在菜单上”这句隐喻,我们试着从两种语言之间那一点无法完全对齐的缝隙,重新看看翻译、AI 与思考本身。

声明:封面由ChatGPT生成

时间轴

- 00:08 从 token 和 agent 说起:为什么英文复用旧词,中文创造新术语?

- 01:32 Token & Agent 101:词元、分词器,以及智能体如何调用工具做事

- 08:36 一词多义背后的共同结构:token、agent 与 agency

- 10:46 Shuttle、vector、probe、crypt:跨领域复用的词,如何把不同概念连起来

- 15:45 结构映射与复合构词:英文更重“关系”,中文更容易“望文生义”吗?

- 18:13 命名与翻译,会不会改变我们理解新概念的路径?

- 20:54 Word2Vec 与语义空间:词语如何在数学地图上留下形状

- 23:31 分词器、语言差异与大模型的“归纳偏置”

- 25:51 双语推理、思维链与不同语言中的思考轨迹

- 28:31 语言相对论、thinking for speaking,以及“他 / 她”的口误

- 32:33 《巴别塔》:翻译没有带过去的那一点差异,如何变成魔法

- 35:29 “不在桌边,就在菜单上”与“人为刀俎,我为鱼肉”

- 38:41 把两张语义地图重叠起来,从语言的缝隙重新看熟悉的世界

本期提到的关键词

token、agent、agency、tokenizer、Brainshuttle、vector、probe、crypt、结构映射、复合构词、Word2Vec、语义空间、归纳偏置、CoT、thinking for speaking、语言相对论、《巴别塔》


主要参考与延伸阅读

- 结构映射与词语多义性:Gentner(1983);Srinivasan & Rabagliati(2015);Jakubowski、Gašić & Zibrowius(2020)。

- 汉语复合构词与中英语义空间:Song et al.(2022);Yang & Baayen(2025)。

- 词元与分词器:Petrov et al.(2023);Ali et al.(2024);Haslett(2025);《Qwen Technical Report》(2023)。

- 语言与大模型推理:Wang et al.(2025);Li et al.(2025);Xu & Zhang(2026)。

- 语言相对论与 thinking for speaking:Slobin(1996);Lucy(1997);Lai、Rodriguez & Narasimhan(2014)。

- 词向量:Mikolov et al.(2013),*Efficient Estimation of Word Representations in Vector Space*。

其他资料包括 Roche 对 Brainshuttle 的介绍、Etymonline 的 vector / shuttle 词源资料、token 的技术说明,以及布林肯 2024 年 2 月 17 日在慕尼黑的讲话。节目中关于《巴别塔》“语义邻域差值”的部分是本期的解释性想象,并非小说提供的计算模型。


完整参考文献(24 项)

1. Gentner, D. (1983). “Structure-Mapping: A Theoretical Framework for Analogy.” Cognitive Science, 7, 155–170。

2. Song, Z., Xiong, J., Zhao, Q. & Huang, C.-R. (2022). “Compounding Is Semantics-driven in Chinese.” The Cambridge Handbook of Chinese Linguistics。

3. Srinivasan, M. & Rabagliati, H. (2015). “How concepts and conventions structure the lexicon: Cross-linguistic evidence from polysemy.” Lingua, 157, 124–152。

4. Tjuka, A., Forkel, R., Rzymski, C. & List, J.-M. CLICS 4 数据与项目,2026 v1.0。

5. Jakubowski, A., Gašić, M. & Zibrowius, M. (2020). “Topology of Word Embeddings: Singularities Reflect Polysemy.” SEM 2020, 103–113。

6. Yang, Y. & Baayen, R. H. (2025). “Comparing the semantic structures of lexicon of Mandarin and English.” Language and Cognition, 17, e10。

7. Wiedemann, G., Remus, S., Chawla, A. & Biemann, C. (2019). “Does BERT Make Any Sense? Interpretable Word Sense Disambiguation with Contextualized Embeddings.” KONVENS。

8. Yenicelik, D., Schmidt, F. & Kilcher, Y. (2020). “How does BERT capture semantics? A closer look at polysemous words.” BlackboxNLP。

9. Petrov, A., La Malfa, E., Torr, P. & Bibi, A. (2023). “Language Model Tokenizers Introduce Unfairness Between Languages.” NeurIPS。

10. Ali, M. et al. (2024). “Tokenizer Choice For LLM Training: Negligible or Crucial?” Findings of NAACL。

11. Bai, J. et al. (2023). “Qwen Technical Report.”

12. Haslett, D. A. (2025). “Tokenization Changes Meaning in Large Language Models: Evidence from Chinese.” Computational Linguistics, 51(3), 785–814。

13. Wang, C. et al. (2025). “Under the Shadow of Babel: How Language Shapes Reasoning in LLMs.” Findings of EMNLP。

14. Inaba, T. et al. (2025). “How a Bilingual LM Becomes Bilingual: Tracing Internal Representations with Sparse Autoencoders.” Findings of EMNLP。

15. Li, Y., Xin, J., Miao, M. M., Long, Q. & Ungar, L. (2025). “The Impact of Language Mixing on Bilingual LLM Reasoning.” EMNLP。

16. Xu, S. & Zhang, W. (2026). “Language of Thought Shapes Output Diversity in Large Language Models.” ACL。

17. Yong, Z. X. et al. (2025). “The State of Multilingual LLM Safety Research: From Measuring The Language Gap To Mitigating It.” EMNLP。

18. “Tokenization Matters! Degrading Large Language Models through Challenging Their Tokenization” (2024)。

19. Lucy, J. A. (1997). “Linguistic Relativity.” Annual Review of Anthropology, 26, 291–312。

20. Slobin, D. I. (1996). “From ‘Thought and Language’ to ‘Thinking for Speaking’.” In Gumperz & Levinson, Rethinking Linguistic Relativity。

21. Lai, V. T., Rodriguez, G. G. & Narasimhan, B. (2014). “Thinking-for-speaking in early and late bilinguals.” Bilingualism: Language and Cognition, 17(1), 139–152。

22. Li, J. et al. (2026). “She or He? Source of Errors in L2 Production of 3rd Person Singular Pronouns by Chinese Speakers of English.” Journal of Psycholinguistic Research, 55, article 38。

23. Tamariz, M. (2017). “Experimental Studies on the Cultural Evolution of Language.” Annual Review of Linguistics, 3, 389–407。

24. Mikolov, T., Chen, K., Corrado, G. & Dean, J. (2013). “Efficient Estimation of Word Representations in Vector Space.”


资料说明

- Brainshuttle 是借助血脑屏障细胞表面的受体转运治疗性分子,不宜简单理解成“装药的车”。

- 节目中的“边和节点”“关系复用 versus 复合命名”是主持人的解释性类比,并非相关论文直接验证的结论。

- Token 的实际切分取决于具体模型和 tokenizer。

- 布林肯原话为:“If you're not at the table in the international system, you're going to be on the menu.”

展开Show Notes
凌碧水
凌碧水
2026.10.06
哈哈哈后面结合各类文娱作品和语言使用讲语言的地方最有趣,也好奇两位主播怎么看语言学和哲学专业出身的人才在ai领域的作用
RumW
:
谢谢!我觉得ai时代,语言哲学都很重要啊!然后要保持好奇心和积极的学习,跨领域的思维可能会很有帮助。
孔达
孔达
10天前
想起来之前在重轻播客里听到的更subtle的例子,好像是没有材料和表达的二分那期。说铁托纠正了拍纪录片的导演说的具体伤亡人数,然后被AI天然地打上政治干预艺术的标签。AI的“立场”,或者说从语言天然暗含的“立场”的statistical distribution还是有点令人警惕的。
RumW
:
你的这个联系太棒了!是的,仔细思考一下,其实“微立场”的bias无处不在,而AI完全可以在某方面更加强化。
孔达:是,整体感觉会更liberal一些。不过也可以理解就是了,毕竟互联网感觉整个都挺liberal的。最近Wealden的正模标本的那期,也是联想到LLM佯装成一个中立智者的形象,其实从根子上是避免不了bias的。这部分的bias就是那个蹩脚的正模标本了。。。(不断窜台😅)
共4条回复
凌碧水
凌碧水
2026.10.05
是讨论ai,也是讨论语义学哈哈
我是玉米玉米:哈哈哈哈感觉新时代每天都要学习不同的词才能跟得上
常思量
常思量
2026.10.11
好干货呀,现在AI大趋势真的不学不行
高质量的语气,简单又易懂
听完花儿姐就来听这期了,刚好哈哈哈
JessicaCCH
JessicaCCH
2026.10.09
18:51 🤣老天呐终于理解了token的意思
这集科普很有意思~
00:48 token我理解就像元认知,一个单位之类
依爽
依爽
2026.10.08
30:14 如此专业的内容,学到了
23:57 这个点好有意思
陈源朵
陈源朵
2026.10.08
本集播客我要刷二遍!再好好理解一下Token和Agent
陈源朵
陈源朵
2026.10.08
之前还在上初中时看的《降临》,对语言力量的理解大致是那时候开始启蒙的,主播提到这部又让我想起过去
终于明白token是啥意思了
之前学英文的时候也有同感,感觉完全是两种思维方式,有很多词汇是要放在英语国家的背景下去理解的
红灯儿
红灯儿
2026.10.04
讲不同语言的时候,思维方式也会不一样
RumW
:
说英语的时候性格都变了……我感觉
红灯儿:是的。我觉得每一种语言就是一种人格
rawCL
rawCL
2026.10.08
09:16 煮啵,在南京以及周边城市常说的代币的含义是什么呢🤔
RumW
:
那也是一种小伙伴之间的亲密的代称
rawCL:😜 😜 😜
红灯儿
红灯儿
2026.10.04
07:47 muse最近确实火的有点离谱
RumW
:
真的,确实好用
一万六
一万六
2026.10.04
分词器让我想到了分酒器
RumW
:
哈哈哈
JessicaCCH
JessicaCCH
2026.10.09
11:31 😳原来是这样吗?受教了