激活函数 on AI 学习笔记https://jason-azure.github.io/ai-blog/tags/%E6%BF%80%E6%B4%BB%E5%87%BD%E6%95%B0/Recent content in 激活函数 on AI 学习笔记Hugo -- 0.146.0zh-CNTue, 10 Mar 2026 00:00:00 +0000AI 的数学语言（五）：激活函数——神经网络的开关https://jason-azure.github.io/ai-blog/posts/math-for-ai-5-activation/Sun, 22 Feb 2026 00:00:00 +0000https://jason-azure.github.io/ai-blog/posts/math-for-ai-5-activation/ReLU：一行代码 max(0, x) 让深度学习成为可能。理解激活函数为什么是神经网络不可或缺的非线性魔法。为什么矩阵和激活函数就能涌现智能？——从符号主义到万能近似定理https://jason-azure.github.io/ai-blog/posts/universal-approximation/Tue, 10 Mar 2026 00:00:00 +0000https://jason-azure.github.io/ai-blog/posts/universal-approximation/AI 发展 70 年，本质是两个思想流派的交锋：符号主义相信规则，联结主义相信连接。今天的 ChatGPT 靠的是矩阵乘法加一行激活函数——为什么这么简单的东西就够了？一个 1989 年的数学定理给出了答案。