2.9 莫烦 Python 激励函数 (Activation Function)

---

激励函数 (Activation Function)

作者: Morvan    编辑: Morvan   

• 学习资料:
  • Theano 激励函数 教程
  • Tensorflow 激励函数 教程

今天我们会来聊聊现代神经网络中 必不可少的一个组成部分, 激励函数, activation function. 激励函数也就是为了解决我们日常生活中不能用线性方程所概括的问题.

 

一般来说, 每一层的神经元可以使用不同的激励函数. 选择激励函数比较纠结, 每种类型的神经网络可能需要的激励函数不一.

Activation function　翻译成激活函数，不要误解是指这个函数去激活什么，
而是指如何把“激活的神经元的特征”通过函数把特征保留并映射出来，这是神经网络能解决非线性问题关键。