深度前馈网络
深度前馈网络（deep feedforward network），也叫做前馈神经网络（feedforward neural network）或者多层感知机（multilayer perceptron, MLP）。前馈网络是深度学习的基础，同时在工业应用中也有很重要的作用。本文先讲解一个前馈网络的简单例子，然后讨论前馈网络中的设计决策，包括选择优化模型选择代价函数、确定输出单元、隐藏层激活函数的设计、网络结构的设计和反向传播（back propagation）算法。
深度前馈网络（deep feedforward network），也叫做前馈神经网络（feedforward neural network）或者多层感知机（multilayer perceptron, MLP）。前馈网络是深度学习的基础，同时在工业应用中也有很重要的作用。本文先讲解一个前馈网络的简单例子，然后讨论前馈网络中的设计决策，包括选择优化模型选择代价函数、确定输出单元、隐藏层激活函数的设计、网络结构的设计和反向传播（back propagation）算法。