QKV on AI 学习笔记https://jason-azure.github.io/ai-blog/tags/qkv/Recent content in QKV on AI 学习笔记Hugo -- 0.146.0zh-CNThu, 12 Mar 2026 00:00:00 +0000一看就懂：矩阵乘法到底对 LLM 做了什么？https://jason-azure.github.io/ai-blog/posts/geometric-intuition/Thu, 12 Mar 2026 00:00:00 +0000https://jason-azure.github.io/ai-blog/posts/geometric-intuition/GPT 的本质就是矩阵乘法。但矩阵乘法到底在干什么？9 张动图，把 GPT 里最核心的数学拍给你看。维度变了，几何没变——看懂 2D，就看懂了 GPT。从语言的本质到 Attention 的诞生——QKV 为什么长这样https://jason-azure.github.io/ai-blog/posts/why-qkv/Thu, 05 Mar 2026 00:00:00 +0000https://jason-azure.github.io/ai-blog/posts/why-qkv/语言是对世界的压缩，但用语言解释语言是死循环。40 年的规则尝试失败后，分布式假说绕过了这个问题，而 QKV 是它的工程终局。一篇从哲学到代码、从碳基到硅基的探索之旅。从加减乘除到预测下一个字：Attention 机制零基础拆解https://jason-azure.github.io/ai-blog/posts/transformer-attention/Sat, 21 Feb 2026 00:00:00 +0000https://jason-azure.github.io/ai-blog/posts/transformer-attention/用零基础也能懂的语言，拆解 Transformer 的核心：点积、缩放、Softmax、QKV、多头注意力、因果遮罩。既讲人类设计了什么，也讲机器自己学到了什么。用 4192 个参数看透 Transformer：QKV、多头注意力、MLP 全拆解https://jason-azure.github.io/ai-blog/posts/transformer-qkv-demo/Thu, 26 Feb 2026 00:00:00 +0000https://jason-azure.github.io/ai-blog/posts/transformer-qkv-demo/用一个只有 4192 个参数的 GPT 模型，展示 Transformer 内部每一步的真实数据——Token 嵌入、QKV 投影、多头注意力权重、MLP 稀疏激活，所有数字都来自真实训练。从矩阵乘法到 Transformer：LLM 背后的数学直觉https://jason-azure.github.io/ai-blog/posts/transformer-math/Mon, 02 Mar 2026 00:00:00 +0000https://jason-azure.github.io/ai-blog/posts/transformer-math/不做证明，只建直觉。从矩阵乘法的三种视角出发，一步步搭建理解 Transformer 的完整数学框架：QKV 投影、多头注意力、残差连接、MLP，以及它们如何协作生成下一个 token。