一种基于Conformer建模的语音超分辨率方法

摘要

本发明公开了一种基于Conformer建模的语音超分辨率方法，该方法包括：将语音重采样到窄带带宽，经过快速傅里叶变换，转换到频域，截去高频频谱部分，保留空白的高频频谱部分再进行重采样得到与宽带语音采样率一致的窄带语音以6:2:2的比例划分数据集为训练集，验证集和测试集；将训练集的语音分帧后输入进卷积层以提取其特征，并将提取的特征输入Conformer声学模型进行迭代训练；将T‑F loss作为模型的训练损失函数，使用Adam优化器进行优化；把固定训练周期的模型在验证集上进行测试，以调节模型超参数；将最终训练好的模型在测试集上进行测试，以验证模型的最终性能。本发明可以有效的提高语音或音乐信号的超分辨率，提高低分率语音的整体音质。