用于深度神经网络的激活函数

摘要

本申请公开了用于深度神经网络的激活函数。一种对用于实现深度神经网络(DNN)的硬件进行配置来执行激活函数的方法，该硬件在用于执行激活函数的激活模块处包括用于储存查找数据的可编程查找表，查找数据在向激活模块的输入值的第一范围上近似激活函数，该方法包括：向该硬件的表达形式提供校准数据；对于向硬件的表达形式的激活模块的输入进行监视，以确定向激活模块的输入值的范围；生成用于查找表的查找数据，该查找数据在所确定的输入值的范围上代表激活函数；以及将所生成的查找数据装载到该硬件的查找表中，从而配置该硬件的激活模块用于在所确定的输入值的范围上执行激活函数。