DeepSeek-V4: 1.6T-Parameter MoE with DeepSeek Sparse Attention for Long-Context Reasoning
DeepSeek-V4 于 2026 年 4 月 24 日开源,包含 V4-Pro(1.6T 总参 / 49B 激活)与 V4-Flash(284B 总参 / 13B 激活)两个 MoE 模型,均支持 1M token 上下文,注意力采用 token-wise 压缩加 DeepSeek Sparse Attention(DSA)。V4-Pro-Max 在 SWE-bench Verified 上达到 80.6%,为开源权重最高、与 Gemini 3.1 Pro 持平;输出价 $0.87/M token,MIT 许可、权重已上 HuggingFace。
INSIGHTDSA 稀疏注意力配合高稀疏 MoE(1.6T 总参仅激活 49B)是当前压低超大模型推理成本的主流路线,49B 激活量让单次推理算力接近一个中等稠密模型。对搜推团队,V4-Flash 这种 13B 激活、1M 上下文的开源模型更适合做相关性判别、query 改写或离线标注;MIT 许可也降低了自建 LLM 能力的合规门槛。