一种基于虚拟偶像的歌曲数据处理方法及演唱交互系统

摘要

本发明公开了一种基于虚拟偶像的歌曲数据处理方法，该方法包括如下步骤：获取多模态数据，从多模态数据中提取演唱歌曲音频，并将演唱歌曲音频转化为歌曲文件以词谱分离操作，生成与该歌曲文件对应的乐谱信息和歌词信息；根据音乐处理模型对乐谱信息和歌词信息进行编辑处理，生成乐谱创作信息和歌词创作信息；基于虚拟偶像的声线，将乐谱创作信息和歌词创作信息进行语音合成，生成目标曲目文件并输出。本申请能够通过移动设备的控制将目标自创作曲目在成像设备上表演，以辅助交互对象进行自行创作及演唱，提升交互对象的创作体验。