一种基于梯度估计和CTC算法的语音识别攻击防御方法及装置

摘要

本发明公开了一种基于梯度估计和CTC算法的语音识别攻击防御方法，包括：对采集的语音音频进行预处理，形成能够直接输入语音识别模型的音频矩阵，将音频矩阵分成训练集和测试集；利用训练集中的音频矩阵训练语音识别模型，并利用测试集中的音频矩阵验证语音识别模型的识别准确率；初始化对抗样本，根据对抗样本的转录结果与目标短语之间的距离和原始音频矩阵和对抗样本的距离构建对抗样本的优化目标函数，以优化目标函数最小为迭代目标，估算目标函数对扰动的梯度并用Adam优化器迭代更新扰动，以获得最优的对抗样本。该语音识别攻击防御方法能够生成不被人耳识别的对抗样本，并经过对抗训练提高语音识别模型防御对抗样本的能力。