About this Episode
随着DeepSeek登上苹果App Store榜首,这款低成本、高性能的开源模型引发全球关注的同时,也造成了英伟达股价在1月27日下跌近17%,市值蒸发5890亿美元。按理说,像DeepSeek这样的开源模型会带动AI创业繁荣,进而推高GPU需求。为什么英伟达却不涨反跌?本期节目我们将和模型算法、GPU虚拟化领域的学者与创业者,一起探讨DeepSeek的核心优势,它对芯片产业和开源生态的影响,还原这场市场震动背后的逻辑。
【主播】
泓君Jane,硅谷101创始人,播客主理人
【嘉宾】
陈羽北,加州大学戴维斯分校电子与计算机工程系助理教授,AIzip.ai联合创始人
John Yue,Inference.ai创始人兼CEO
【你将听到】
02:29 DeepSeek的三板斧:低成本、高性能、全开源
03:57 大模型创新瓶颈:技术路线趋同,突破性想法变少
05:09 核心创新:V3基础模型能力强
07:01 创新一:MOE与绕过稀疏奖励
09:04 创新二: 通过蒸馏学习传递能力,大模型教小模型
12:46 为何V3出来一个月之后才引爆股市
13:54 对英伟达利好与利空:冲击溢价但并未冲垮壁垒
16:01 DeepSeek冲击英伟达两大护城河:“绕过”NVLink和CUDA
23:00 类似于Groq的推理芯片能崛起吗?软件依然是难点
29:11 《The Bitter Lesson》的启发:AI的两种基本能力是学习与搜索
30:06 效率困境:AI需要跨越三个数量级才能达到人类智能
35:20 开源的意义:降低AI应用开发准入门槛
38:06 重构API价格体系:DeepSeek R1通过技术优化将成本降至OpenAI O1的1/27
39:47 降级芯片难持续:老款芯片停产限制了成本优化空间
43:08 小模型特定场景突破:某些任务已可媲美大模型表现
45:34 未来AI基建分层化:端、边、云分工协同是趋势
48:32 Anthropic的预测过分乐观:AI学习效率太低不足以追赶人类智能
53:10 大模型本身不足以通向AGI,但基础研究方向正在取得进展
56:00 模型自我能力提升是达到AGI的核心门槛
57:33 通往AGI的多条路径:世界模型等不同技术方向并存
01:03:22 提问DeepSeek :数据与持续创新能力
【其他相关信息】
- MOE (Mixture of Experts,专家混合模型):一种神经网络架构,结合多个专家子模型进行工作,通过负载均衡提高效率,适用于大规模模型。
- Bootstrap (自举法):模型通过生成多个答案并选择最佳结果,来提升自身性能的自我改进方法。
- 蒸馏 (Distillation):将大模型的知识转移给小模型,通过模仿大模型的输出,提高小模型的能力。
- GRPO (Group Relative Policy Optimization ,分组相对策略优化):一种用于强化学习的优化算法,通过在同一问题下生成多个输出(即“分组”),并对这些输出进行相对比较来计算奖励。这种方法避免了传统 PPO 中对价值函数的依赖,从而显著减少了内存和计算资源的消耗。
- PPO (Proximal Policy Optimization,近端策略优化):一种强化学习算法,通过限制策略更新的幅度来保持优化的稳定性。
- 负载均衡 (Load Balance):在分布式系统中平衡计算任务,避免过度集中或资源闲置。
- 强化学习 (Reinforcement Learning):通过奖励机制引导AI模型学习最优策略的机器学习方法。
- 模型预测控制 (Model Predictive Control):基于对未来状态的预测来优化当前决策的方法,广泛用于自动化控制。
- NV Link (NVIDIA Link):英伟达开发的高速芯片互联技术,支持多GPU协同工作,提升计算效率。
- CUDA (Compute Unified Device Architecture,统一计算设备架构):英伟达推出的并行计算平台和编程模型,用于加速GPU上的计算任务。
- PTX (Parallel Thread Execution,并行线程执行):CUDA平台底层的指令集架构,直接与GPU硬件交互。
- CUDA Core/Tensor Core:CUDA Core 是GPU中的基础计算单元,负责执行并行计算任务;而 Tensor Core 是专门为加速深度学习中的矩阵运算和AI任务设计的计算单元,提供更高的计算效率。
- ASIC (Application Specific Integrated Circuit,专用集成电路):为特定应用定制的集成电路,通常用于高效处理特定任务。
- Groq:一家专注于开发AI专用芯片的美国公司,提供高效的AI计算解决方案。
- 《The Bitter Lesson》(痛苦的教训):Rich Sutton的经典文章,提出在AI发展中,计算能力和规模比算法精巧性更为重要。
- 世界模型 (World Model):一种能够预测动作后果的AI模型,常用于环境模拟、决策规划和强化学习中。
- 《Genie 2》:DeepMind的研究论文,介绍了一个可以在任意2D图像中进行自由移动探索的AI模型 - 给它一张图片,AI就能变成图中的"主角",可以在画面中前后左右走动,仿佛真的进入了这个2D世界。这是一个重要的"世界模型"(World Model)的实例。
- HPC (High Performance Computing,高性能计算):使用超级计算机集群处理复杂的计算任务,通常应用于科学计算、气候模拟等高需求场景。
【监制】
杜秀
【后期】
AMEI
【BGM】
Dusk Movers - Alexandra Woodward
City Phases STEMS INSTRUMENTS - John Abbot
【在这里找到我们】
公众号:硅谷101
收听渠道:苹果|小宇宙|喜马拉雅|蜻蜓FM|网易云音乐|QQ音乐|荔枝播客
海外用户:Apple Podcast|Spotify|TuneIn|YouTube|Amazon Music
联系我们:[email protected]