一个新的激活函数及其在图像分类的应用

摘要

提出一种新的激活函数RSLU函数,它改进了Sigmoid函数和ReLU函数的不足,并通过加入两个梯度控制参数来调控学习过程,提升卷积神经网络模型的稳定性和有效性,将其应用到图像识别数据集MNIST上进行训练和测试实验,表明RSLU函数相比于现有的激活函数运行速度较快,分类精度更高,泛化能力更强。