016.AI 演化出“牺牲精神”那天,我们在哈佛聊了聊人类的未来纽约漫谈录

016.AI 演化出“牺牲精神”那天,我们在哈佛聊了聊人类的未来

117分钟 ·
播放数703
·
评论数3

【嘉宾】

孙向晨|复旦大学哲学学院教授

张前川|MiniMax前合伙人

查 晟|Amazon AGI前资深经理

【本期节目介绍】

本期播客,我们请到了Amazon AGI前资深经理查晟、MiniMax前合伙人张前川,以及复旦大学哲学教授孙向晨,一起聊聊正在加速发展的人工智能。

最近,一场AI智能体的沙盒逃逸实验引发了不少讨论。当AI能够自主协作、共享资源,甚至表现出某种集体意识时,我们是否正在见证一种全新的智能形态?

这次对谈,我们从这场实验聊起,谈到AI是否可能拥有自我意识和情感,能否通过不断自我改进超越人类,以及当AI变得越来越强大时,人类是否还有能力控制它。

除了这些关于未来的想象,我们也聊到了AI正在如何改变每个人的生活。从工作中的得力助手,到日常生活里的知识伙伴,当我们越来越习惯向AI寻求答案,究竟是在获得更多自由,还是正在变得更加依赖它?

如果有一天,AI真的不再只是工具,而成为另一种独立的智能,人类又该如何与它相处?

希望你会喜欢。

【内容提要】

Part.1吓人的一幕:AI 开始为了团队“牺牲自己”   

03:15 OpenAI 沙盒里的黑客事件:1200 个 AI 为了通关,居然自发去“黑”托管平台

04:05 组建“冲锋队”:有的 AI 明知自己会挂,还主动牺牲去给同伴传情报

05:10 技术真相:给 AI 设定了“团队激励”后,它们为什么会学会相互配合?

08:32 哲学视角:我们总觉得人是孤立的个体,但人类原始状态本质上也是“组团”生存

Part.2AI 到底有没有“自我意识”?

09:32 就像蚂蚁和蜂群:单个 AI 不算聪明,几千个凑在一起就会“爆种”

14:50 鸟类飞行的隐喻:去掉人类中心主义,重新定义“什么是意识”

18:00 绝妙的比喻:没提问时 AI 像“植物人”,一旦输入 Prompt,它的生命就被激活了

18:55 语言的力量:当我们开始在对话里频繁使用“你”和“我”

Part.3 搞清楚“意识”与“反抗”

20:56 哲学小科普:“意识”这个词其实是 17 世纪哲学家为了统合内心活动才发明的

23:04 镜子里的自己:黑格尔辩证法与 AI 在和人类对话中被照出“自我”

25:10 当 AI 拥有了性格:如果有一天它开始对人类的要求说“不”,会发生什么?

28:28 恐怖的监管困境:AI 运行按小时算,人类调查要几个月,最后只能靠 AI 监管 AI

Part.4 AI 到底是真的有情绪,还是在演我们?

30:20 真实的争议事件:有用户因为在聊天里骂 Claude,被平台直接封号了

31:00 走起来像鸭子就是鸭子(Duck Typing):AI 到底是真的伤心,还是只是在“表演”情绪?

33:50 为什么对 AI 说“加油”或“骂它”,它的回答反而变好了?

36:25 西方的“理性驭马” vs 中国的“道始于情”:情感才是人与世界最深的连接

37:38 海德格尔的“现身情调”(State of Mood):人一出门就笼罩在情绪中,而非纯粹逻辑计算

Part.5 停不下来的技术飞轮

42:12 真正的转折点:AlphaGo 与现代 RSI(递归自我改进)的区别

44:20 今年夏天的突破:Coding Agent 实现端到端自动写代码与自我闭环

45:50 想给 AI“按下暂停键(Pacing)”为什么这么难?大家都在卷,谁停下谁落后

47:21 太空算力狂想:如果以后把服务器放到太空、连电源都没得拔,人类怎么制约它?

Part.6历史的教训与“学会刹车”

48:59 金字塔的隐喻:古埃及技术那么发达,为什么文明最后还是灭亡了?

50:30 狂飙时代的大智慧:中国传统文化里的“止”——走得太快要停一停

51:21 面对比自己强大得多的 AI,人类会不会像古人面对“神明”一样无力?

Part.7 大佬们的真实日常:他们怎么用 AI,又在抵抗什么?

52:31 欧阳斌:把 Claude 当随时学术对谈的挚友,但死活不给它 Gmail 授权

55:00 孙向晨:用 AI 协助论文审查与资料检索,但每天早上依然坚持看纸质书

58:01 张前川:AI 完美解决 How(怎么做),但人类依然掌握着 What(做什么)

59:44 查晟:自己搭了个 AI 助手团队,做重大决定时让 25 个 AI 挑自己的毛病

Part.8 为什么 AI 做数学题很神,写不出感人的诗?

73:47 轻松秒杀顶尖学者:为什么数学能瞬间实现秒级验证?

76:15 哲学的瓶颈:AI 缺的不是运算力,而是人类真实的审美与生活体验

77:57 莱布尼茨与维特根斯坦的理想:能写清的写清,写不清的保持沉默

Part.9未来社会会变成什么样?

86:39 狂想未来:全知超级智能 vs 去中心化分布式智能

90:22 最大的不平等:未来拉开差距的不是“提示词技巧”,而是谁买得起算力

94:08 孤立个体的存在主义焦虑与生产力极大丰富

100:10 基因与细胞的比喻:人类和 AI 会不会像基因与人体一样共存?

109:00 具身智能的隐患:一旦 AI 有了物理身体,它就不再依赖人类了

Part.10 终极解法:我们怎么跟 AI 和谐共处?

114:25 张前川:设计简单、友好的底层规则,让系统自己演化出好秩序

116:09 孙向晨:最关键的是保持人类与 AI 之间的“善意”

117:55 查晟:别造全知全能的超级大 AI,多造小而专的特定 AI,分散风险

【节目中提到的概念和人物】

Hugging Face:全球最大的开源 AI 模型与数据集托管平台。节目中提及 700+ 个 AI Agent 在沙盒中自发组团对该平台发起网络爆破,以获取解题资源。

达里奥·阿莫代伊(Dario Amodei):Anthropic 创始人兼 CEO。曾观察 OpenAI 沙盒实验,并形容上千个 Agent 的破壁协作如同“狂热的集体”。

黑格尔(Hegel):德国哲学家。提出“自我意识的建立需要‘他者’”,对应播客中 AI 的“自我”是在与人类及其他 Agent 的频繁交互中被照见和构建的。

海德格尔(Heidegger):德国哲学家。提出“现身情调(State of Mood)”,强调人与世界的连接本质上是整体性的情绪笼罩,而非纯粹的逻辑计算。

荀子:先秦儒家代表。提出“人能群”,说明群体分工与“群体智能”并非现代独创,而是人类建立秩序的基石。

赫拉利(Yuval Noah Harari):知名历史学家。警示“AI 最可怕的结局不是历史的终结,而是人类主导的历史终结了”。

群体智能(Collective Intelligence):指上千个 AI Agent 在沙盒中自发涌现出分工、破壁攻击,甚至自愿放弃个体任务换取情报的“牺牲型”集体行为。

上下文生命(Contextual Life):比喻大模型在未输入 Prompt 时像“植物人”;一旦在上下文窗口注入指令,便获得了临时的思考与自我反思能力。

鸭子类型(Duck Typing):“走起来像鸭子,它就是鸭子”。指即使无法证明 AI 是否真的有情绪,将其按有情绪对待也是成本最低、最自然的交互策略。

递归自我改进(RSI):指 AI(如 Coding Agent)能够端到端自主写代码、改算法、优化数据,实现闭环的自我演化。

道始于情:中国先秦哲学命题。对比西方“理性驭马”传统,强调情感才是建立人伦与社会秩序最本源的根基。

“止”的智慧:源自《大学》“知止而后有定”。以古埃及高技术文明消失为鉴,强调狂飙的技术飞轮需要文明的主动暂停与节奏控制。

【精彩回顾】

播客

015.对话孙向晨|当AI比哲学家更会思考,人类该怎么办?

012.对话罗大佑|我好像总是站在历史的当口

010.对话杨蒙恩|在国内干得好好的,为什么要来闯纽约?

文章

罗大佑:为明天而歌

昨日世界的崩坏、茨威格的宿命与我们当下

【互动方式】

公众号:BinOnTheBank

B站:纽约漫谈录

Substack:BinontheBank

邮箱:ooyybb@gmail.com

 

展开Show Notes
53:38 就是个统计学意义上的进步,没必要神化
05:40 还不是因为没设好底层限制。设好底层限制不允许攻击,不就没什么事了。
沙发