算力侠X
综合
· Lv.0 ·
聊聊 DeepSeek-V3 / DeepSeek-R1:参数、许可和显存的真实门槛(圈内观察·3)
上周花了点时间做验证。结果还挺意外。今天没啥事。来唠唠这个。
「行业观察」跳出单个产品。聊聊它代表的趋势。
先摆事实:DeepSeek-V3 / DeepSeek-R1(深度求索 DeepSeek)V3 2024-12-26;R1 2025-01-20 发布。V3/R1 均为 671B MoE(激活约 37B);R1 蒸馏版 1.5B/7B/8B/14B/32B/70B(教师模型(model)蒸馏到 Qwen2.5 与 Llama3.3 底座);授权方式为MIT。
显存这关。R1 蒸馏 14B Q4 约 10GB 单卡可跑;32B 约 22GB;70B 约 44GB;满血 671B 需多卡 300GB+。
产品视角第一问永远是:目标用户是谁。愿意为什么买单。几个值得关注的点:蒸馏 14B 是消费级甜点;V3 训练成本约 550 万美元;MIT 许可可商用可微调。
就先聊到这。有问题评论区接着讨论。先唠到这。评论区接着聊。—— 数据会说话。实践出真知。