机器学习(一):激活函数(Activation Function)
0. 激活函数上图为wiki的定义:激活函数定义了每个节点(神经元)的输出和输入关系的函数。下表:常用激活函数 编号\;编号\; 函数 函数 公式公式 1)1) sigmoid(x)sigmoid\;(x) φ(x)=11−e −x φ(x) = \dfrac{1}{{1-e^{ \ -x}}} 2)2) softmax(x)softmax\;(x) φ