https://jason-azure.github.io/ai-blog/tags/deepseek-v3/Recent content in DeepSeek-V3 on AI 学习笔记Hugo -- 0.146.0zh-CNMon, 23 Mar 2026 00:00:00 +0000https://jason-azure.github.io/ai-blog/posts/moe-architecture/Mon, 23 Mar 2026 00:00:00 +0000https://jason-azure.github.io/ai-blog/posts/moe-architecture/DeepSeek-V3 拥有 6710 亿参数，但每个 token 只激活 370 亿——不到总量的 6%。这不是偷懒，这是 AI 架构设计中最精巧的一课：不是所有神经元都需要同时工作。