基于图片的SMPL参数预测以及人体模型生成方法

摘要

本发明公开了一种基于图片的SMPL参数预测以及人体模型生成方法，涉及机器学习、计算机视觉以及三维重建领域。本发明包括：预测SMPL的形态参数，对输入图像通过带有特征融合以及注意力机制的深度神经网络提取人体轮廓，再对人体轮廓的图片预测形态参数，并基于建立的人体形态与形态参数的映射函数进行微调；利用多阶段的姿态参数预测网络对输入的图像预测SMPL的姿态参数，其中利用2d关节点坐标、相机参数与3d关节点坐标训练和预测网络；通过SMPL转换函数获得最终的三维人体模型。本发明充分利用了相机信息和3d信息，提升了人体轮廓提取效果和姿态参数预测效果，提升了三维模型对图片人体形态的拟合效果，具有普适性。