Alignment 是全球投资平台拾象科技和开源研究平台「海外独角兽」旗下的声音栏目。 本期内容是我们和「张小珺商业访谈录」串台节目的第二期。在上期节目中，拾象科技 CEO 李广密和商业作者张小珺一起总结了 2023 年全球大模型竞赛，本期我们选择将“AGI 大基建与马拉松”作为关键词，延续上次内容，对 2024 Q1 全球大模型的发展进行了复盘，主要讨论了模型竞争格局的变化、模型的算力和能源瓶颈、开源模型对闭源模型的冲击，以及全球 AGI 时间线的变化等关键问题。 本期人物 * 李广密：拾象科技创始人及 CEO。 * 张小珺：商业作者，曾供职《财经》杂志，目前在腾讯新闻，一直写作关于中国商业的深度报道。 主要话题 * 00:25 从 OpenAI Sora 到 Llama3，2024 的 LLM 格局和 AGI 演进发生了哪些变化 * 02:12 Elon 和 Google 都加入了开源，为什么说“开源模型会打掉闭源模型”的商业价值？ * 15:14 为什么这波 AGI 浪潮中诞生的巨头会比互联网时代更加庞大？ * 18:20 AGI 登山路线：南坡模型，北坡产品 * 24:04 AGI 大基建现在的关键瓶颈是算力和数据中心建设 * 34:35 中美 AGI 大基建差异 * 41:53 Scaling law 接下来还能走多远？是否能通往 AGI？ * 50:53 创业公司追随 Sora 是很危险的 * 56:45 为什么 AGI 时间线看起来进展变慢了？ * 1:06:05 AGI 时代也许并不需要 killer app，而是一个随时随地的 agent 延伸阅读 * AGI 马拉松与大基建 * 跨年对谈：千亿美金豪赌开启 AI 新摩尔时代 * Sora 的算力数学题 * 我们距离 AGI 还有多远 * Scaling 能通往 AGI 吗？ * AI 重塑法律行业：为 80%的工作带来 10x 提升 * Notion CEO：为什么 RAG 会彻底改变知识型工作？ * 专访 VideoPoet 作者：LLM 能带来真正的视觉智能 * 专访 Pika Labs 创始人：探索视频生成的 GPT 时刻 使用音乐 El Marsiano - Don Bacilon 联系我们 微信公众号：海外独角兽

Alignment 是全球投资平台拾象科技和开源研究平台「海外独角兽」旗下的声音栏目。 本期内容是我们和「张小珺商业访谈录」的串台节目，拾象科技 CEO 李广密和商业作者张小珺一起讨论了 2023 年的大模型军备竞赛、接下来的格局变化，以及在 2024 年大模型领域值得期待的重要事件。拾象团队在过去一年中积极追踪着全球一线大模型公司、顶级 AI research lab 的动态，本期内容也是我们持续研究的浓缩总结，我们相信，“新摩尔定律时代”才刚刚开始，随着模型智能能力的进化和算力成本的持续优化，在 2024 年还会有更多惊喜涌现。 本期人物 李广密：拾象科技创始人及 CEO。 张小珺：商业作者，曾供职《财经》杂志，目前在腾讯新闻，一直写作关于中国商业的深度报道。 主要话题 * 03:29 2023 年 AI 的四大重要分水岭有哪些？ * 04:23 除了 OpenAI、Anthropic、Google 外，还有谁能进入大模型竞赛圈？ * 20:45 GPU 成本下降后，下一代模型的训练成本为何会提高？ * 29:36 2024 年将是硅谷大模型公司格局的关键决胜阶段 * 36:40 什么是“新时代摩尔定律”，为什么它会成为 AI 未来发展的风向标？ * 44:44 2023 年 LLM 巨额投资在赌什么？赌出来了什么样的结果？ * 54:10 开源与闭源模型的终结形态是什么样的？ * 01:05:20 GPT-5 或将在 2024 实现？ * 01:28:10 大模型 native 产品的“乔布斯”在哪？ 延伸阅读 * 跨年对谈：千亿美金豪赌开启 AI 新摩尔时代 * 专访VideoPoet作者：LLM能带来真正的视觉智能 * 专访Pika Labs创始人：探索视频生成的GPT时刻 * Character AI：如何把LLM变成人类想象力引擎？ * Perplexity AI，比Google Bard和Bing Chat更靠谱的问答引擎 * Midjourney：AIGC现象级应用，一年实现1000万用户和1亿美元营收 * Runway：AI Native Tools工厂，视频生成领域的字节跳动 使用音乐 El Marsiano - Don Bacilon 制作出品 * 出品：海外独角兽 * 监制：Siqi * 运营：Lavida 联系我们 微信公众号：海外独角兽

Alignment 是全球投资平台拾象科技和开源研究平台「海外独角兽」旗下的声音栏目。 本期内容来自以 GPT-4 主题的一场闭门讨论会。英伟达 CEO 黄仁勋在 GTC 2023 中提到 AI 领域正迎来自己的 “iPhone 时刻”，创立不到 10 年的 OpenAI 正是推动着一切发生的重要力量之一。而前不久 OpenAI 发布的 GPT-4 又将 AGI 热潮掀高了一层。 在 GPT-4 发布后，海外独角兽组织了一场主题闭门会，在长达 3 小时的讨论中，AI 领域从业者、一线创业者以及一级市场投资人们共同讨论了： * GPT 是如何进化的？ * 大模型的边界在哪里？ * 多模态会为大模型带来什么样的新能力？ * AI Native 应用长什么样？ * 有哪些关于大模型的非共识？ 我们将其中的精彩内容进行剪辑，作为 「Alignment」 的第一期内容发布。Enjoy～ 注：节目录制时间为 2023 年 3 月 19 日，音频内容根据本次讨论会现场实录剪辑制作，仅代表嘉宾观点，点击链接可查看本次活动完整纪要。 本期人物 * 李广密 拾象科技创始人&CEO * 李志飞 出门问问创始人& CEO * 硅谷徐老师 公众号：硅谷云 ｜Twitter：@H0wie_Xu * 陈利人 独到科技 * 戴雨森 真格基金 * 陈于思 某 VC * Ethan 蒋镒珍 Vitally AI * 符尧 艾伦人工智能研究所 * 郑玉典 硅谷 AI 创业者 * 张星辰 源码资本 * 沈涛 帆软 * 李泽宇 天风海外 * 徐玥晨 明势资本 * 邢曜鹏 五源资本 * 杨臻 某 PE 机构 * Michael Liu Fam Capital * 李贺 主要话题 * 00:02:13 GPT-4 的边界可以以超过人类最强作为一个分界线 * 00:10:48 OpenAI 不只追求做新东西，从 80 分到 90 分的优化要难于从 0 到 50 分的突破 * 00:16:28 GPT 的能力未来可以“量产”无限供给的应届大学生 * 00:24:25 ChatGPT 可以应对职场的“勾心斗角”吗？ * 00:36:37 AI Native 的应用长什么样？AI 将如何改变软件生产过程 * 00:41:16 OpenAI VS 垂直模型，模型的未来格局会是什么样？ * 00:58:38 大模型时代，开源可能是一个伪命题 * 01:03:29 未来大模型是否有边缘端推理芯片需求？ * 01:06:51 为什么大模型的可解释很重要？ * 01:13:15 AIGC 是一个典型的中国叙事，大模型的应用要远大于“内容生成” 延伸阅读 * OpenAI与AIGC：改变人类生产范式，通往“万物的摩尔定律” * Anthropic：出走 OpenAI，Google 站队，AGI 是天使还是魔鬼？ * OpenAI 创始人的AGI预言：AI Safety、Scaling laws 与 GPT-20 * ChatGPT 思考：探索智能的极限 * Scaling laws for reward model overoptimization * 通用人工智能时代到来：尽管 AGI 不完美，人类也会犯错 【本期讨论中被提及的相关名词】 * MidJourney：一款文生图应用，产品搭载在 Discord 中，基于同名自有模型开发。 * Jasper.ai: AI 营销写作工具 * Character.ai：个性化 AI 聊天机器人平台，用户可以自定义或借助模板来设定 chatbot 的风格，并与之对话 * Github Copilot：由 OpenAI 和 Github 合作推出的自动编程工具，基于AI编程模型Codex 开发。 * Stable Diffusion（SD）：一款开源的文生图模型，由 Stability AI 公司开发。 * Hallucination: 幻觉 (hallucination) 是指没有相应的客观刺激时所出现的知觉体验。 * Google 三大论文：2003 年、 2004 年和2006 年，Google 公司先后发表了三篇著名的论文 GFS 、MapReduce和 BigTable。Doug Cutting 在受到了这些理论的影响后开始在雅虎开发 Hadoop。 * HDFS： 一种分布式文件系统，用于处理在商业硬件上运行的大型数据集。 它用于将单个 Apache Hadoop 集群扩展到数百 （甚至数千）个节点。 * 3D 堆叠：把一块芯片从二维展开至三维的技术路径，通过缩短电流传递路径来降低功耗。 * Boot loader: 操作系统内核运行之前运行的一段小程序。可以初始化硬件设备、建立内存空间的映射图，从而将系统的软硬件环境带到一个合适的状态，以便为最终调用操作系统内核准备好正确的环境。 * PRD: Product Requirement Document 产品需求文档 * Kubernetes（K8s）：用于自动部署、扩缩和管理容器化应用程序的开源系统。它将组成应用程序的容器组合成逻辑单元，以便于管理和服务发现。Kubernetes 源自 Google 15 年生产环境的运维经验，同时凝聚了社区的最佳创意和实践。 使用音乐 El Marsiano - Don Bacilon 制作出品 * 出品：海外独角兽 * 制作：Siqi * 运营：Lavida * 后期：默默、Huilei * 设计：Lydia 联系我们 微信公众号：海外独角兽