基于音乐频谱分析全自动3D动画生成方法

摘要

本发明公开了基于音乐频谱分析全自动3D动画生成方法，涉及3D动画技术领域，通过对音乐的频谱分析，输出基础数据，并通过深度学习分析基础情感取向；基于深度学习的人声、角色切换识别，辅以Mesh网格切分及UV贴图切换，实现角色口型拟合；通过对3D模型的Mesh网格分拆、骨骼动作分类和UV贴图分类，实现角色多变的换装形态；通过深度学习分析音乐获得的基础元素，进行对抗网络训练，得到训练数据。本方法通过深度学习训练取得音乐核心数据，并配合3D模型制作、网格分拆、骨骼动作库分类素材，最后辅以深度学习数据进行动作决策选择，串联出准实时的动作衔接流畅、富有情感表达力、符合音乐表达的3D动画，且还可以在多终端上实时渲染。