一种基于权重重要性的全连接神经网络优化方法和装置

摘要

本发明公开一种全连接神经网络优化方法和装置，方法包括：获取待优化神经网络结构数据及其输入样本数据集；计算神经网络中各神经元的输入和输出表达式；计算隐藏层中各神经元对后一层中各神经元的影响程度表达式；基于神经元对后一层中各神经元的影响程度表达式，计算前一层输入变化引起的所述影响程度的变化程度表达式；计算各神经元与后一层中各神经元的关联程度表达式并基样本数据关联程度值；最后对于较小的关联程度值，将其对应的神经元之间的权重值进行近似处理。本发明在考察各个神经元之间的关联程度的同时考虑了输入变化对关联程度的影响，减小功耗开销，提高神经网络的可靠性。