基于模糊训练框架的音乐歌词可控生成的方法及系统

摘要

本发明公开了一种基于模糊训练框架的音乐歌词可控生成的方法及系统，该方法包括：将MP3格式的音乐与歌词LRC文件进行预处理得到复合词序列及对应的歌词序列；基于多头注意力机制的编码器‑解码器模型，对原始的音乐旋律与歌词对进行端到端的生成训练，得到编码器的源表示；随机采样训练歌词目标序列以获得约束词，通过模型对约束词进行编码以获得约束词序列的表示；对获得的编码器的源表示以及目标歌词序列增量掩码表示与获得的约束词序列的表示使用双交叉注意力组件进行融合，得到约束词引导的旋律在语言空间的表征向量。本发明在不影响模型可控生成效率的情况下实现了对受限词的约束，缓解可控生成对于数据的需求，提升了可控生成的效果。