ReLU 激活函数

线性整流单元，定义为 f(x)=max(0,x)，因计算简单且能缓解梯度消失问题，成为深度学习中最常用的非线性激活函数之一。