McCulloch-Pitts 神经元百科全书人工智能的“始祖鸟“
一、开篇:神经网络的"始祖鸟"
如果把现代深度学习比作一棵参天大树——GPT、Stable Diffusion、AlphaFold、自动驾驶……所有这些枝繁叶茂的果实——那么它的根,可以一直追溯到1943 年的一篇论文:
“A Logical Calculus of the Ideas Immanent in Nervous Activity”
(《神经活动中内在思想的逻辑演算》)
Warren S. McCulloch & Walter Pitts,Bulletin of Mathematical Biophysics, 1943
这篇论文提出了人类历史上第一个数学化的人工神经元模型——后来被称为McCulloch-Pitts 神经元(简称MP 神经元)。
那时距离图灵发表《On Computable Numbers》刚好 7 年,距离香农提出"信息论"还有 5 年,距离冯·诺依曼提出"存储程序计算机"还有 2 年——人类正站在计算时代的黎明。
MP 神经元在工程上极其简单:一组二元输入、一个加权求和、一个阈值激活,输出 0 或 1。但它在思想上极其深刻——第一次把"大脑神经元的工作方式"和"数学逻辑"直接对应起来:
- 神经元的激发(fire)= 命题为真(true)
