24029
120
今天这集是我和广密【全球大模型季报】第5集，是2024年Q4季报，也是我们录制的第二次跨年特辑。
提前和大家见面啦：）
这次你会发现，我们的聊天篇幅开始从大模型技术转向对大模型产品的探讨。很大概率来说，产品会是2025年AI的最大趋势之一。AI产品会如何落地？产品形态又会如何演变？
广密带来了最新猜想。他提出，过去半年他最强烈的认知变化是，不管国外的ChatGPT、Anthropic、xAI、Perplexity，还是国内的豆包、Kimi，甚至是做Coding相关的Cursor、Devin……虽然各个产品的产品形态不一，从不同路径发散，但最后会殊途同归。他们最终很可能收敛到同一个叙事之下，争夺同一片领地。
很开心转眼之间，【全球大模型季报】已经陪伴大家1年，明年仍然希望这个系列能持续地帮大家了解最前沿的AGI动态并带来认知进化。
本集是《张小珺Jùn｜商业访谈录》和《海外独角兽》的串台节目。
我们的播客节目在腾讯新闻首发，大家可以前往关注哦，这样可以第一时间获取节目信息和更多新闻资讯。
02:33 Part 1: OpenAI
- ChatGPT本质是奔着“下一个Google”方向去了，如何beat Google是最大的牌
- 一定要逛计算机历史博物馆，理解“计算架构+信息分发”演变的主线逻辑
- Google也是从Yahoo边缘市场撑大做起来，伟大公司是从边缘市场起来
- 小红书非常有意思，融合了搜索+推荐+问答+做任务一体化
- 这些产品最终的最终会变成任务引擎、任务容器，是下一个Google
- 电商过去最核心的是GMV，订单转化率，AI时代我感觉是任务完成率
- Chatbot对话形态大概率不是提取智能最有效的交互方式，模型如何更主动？
- 可能的一个产品形态是个人助理或者超级助理
- Context非常核心，绝大多数人都还没意识到，是一条关键的暗线
- 如果AI的生成能力增强了，未来会生成的是什么？Mobile最大增量是内容，LLM最大增量新型软件
- 既然这些LLM产品想成为Google已经变成了一张明牌，你觉得Google有能力阻止这件事发生吗？
- “下一个Google”的产品，会是一家垄断吗？
- 微软和OpenAI同床异梦，微软可能会投资Anthropic
51:04 Part 2: 硅谷其他AI公司和产品
- Anthropic：得Coding，得开发者，得API消耗，有机会得生态，做OS
- Anthropic比较专注Agent，怎么让Agent更快落地是更高优先级
- Killer App长期要有竞争力，要端到端垂直整合能力，向下优化，优化成本、模型架构、模型大小、调整模型数据分布、甚至向下优化推理芯片
- xAI：还是注定要成功，但是upside还有多少不太确定
- Perplexity：更像是一个信息处理的Agent
- Cursor：Coding产品形态要快速迭代，之前补全下一个代码，Cursor补全下一个Action，明年可能端到端生成软件
- Devin：第一个真正意义上做长距离复杂任务的Agent，明年最具有商业价值的是long horizon Agent（长期规划智能体）
- Mistral：已经不用再关注了，他们内部也正式放弃预训练了
01:02:24 Part 3: 对2025/2026关键预言性判断
- 1/ Long horizon task 是下个重点，重要核心圈子几个大佬级人物都在重点做
- 2/ 产品形态的探索，全新的交互界面
- 3/ AI商业模式的探索，今天商业模式还是移动梦网时代
- 4/ 高质量+scalable的数据，尤其是各个垂直行业里面，有没有几千条甚至上万条，任务+Reward数据，要高水平专家标注
- 5/ GPT-5/4.5 Orion：提升能有多大
- 6/ O1后面天花板走到哪：大规模scale RL/o1之后会怎么样，会不会很快遇到瓶颈
- 7/ 假设Coding能力明年提升10倍，软件开发范式怎么改变
- 8/ Context很重要，大家都还不够重视
- 创业公司没法同时做好这么多，得找锋利的切入点，一根针捅破天
01:11:11 Part 4: 再谈Scaling Law
- Ilya最近提的pretrain data wall（预训练数据壁垒）是什么？
- 后训练中有一个关键问题是奖励模型（reward model），整个地球上没有一个reward model衡量所有人，你相信会未来有吗？
- O1系列天花板会卡在哪？这条路通往AGI吗？
- Scaling Law关键阻碍不是算力，不是算法，是data问题
- ChatGPT有数据飞轮吗？未来会出现吗？哪些产品里有高价值数据？
01:22:19 Part 5: 复盘2024
- 回顾一下，能定义2024年全球大模型产业的关键时刻？
- 全球大模型又狂卷一年，卷出了什么？
- 今天想要进入决赛圈，条件是什么？
- 哪些去年的判断你今天更坚信了，哪些去年的判断你今天认知有改变？
- Mega7巨头里面最看好哪个？
- 硅谷人才在流向哪几家公司？
- 明年如果只投一个方向，投什么？
- 这一轮大的机会，我总结是这3个……
- 2024关键词？2025关键词？
【全球大模型季报】系列
2023年：口述全球大模型这一年：人类千亿科学豪赌与参差的中美景观
2024年Q1：和广密聊AGI大基建时代：电+芯片=产出智能
2024年Q2：口述全球大模型这半年：Perplexity突然火爆和尚未爆发的AI应用生态
2024年Q3：AGI范式大转移：和广密预言草莓、OpenAI o1和self-play RL
【更多信息】
联络我们：微博@张小珺-Benita，小红书@张小珺jùn
更多信息欢迎关注公众号：张小珺
