基于时空关联图像的3D形态和姿态估计方法和装置

摘要

本发明提供一种基于时空关联图像的3D形态和姿态估计方法和装置，该方法包括以下步骤：输入具有时间或空间关联性的多个图像帧；对输入的图像帧利用图像特征提取网络进行图像特征提取，得到对应的特征向量；利用时空序列特征提取网络结合注意力机制对各图像帧对应的特征向量进行时序或空间特征提取，得到不同时刻或位置的图片特征向量；将不同时刻或位置的图片特征向量输入包括多层感知机模型的回归模型获得各时刻或位置的估计结果，所述各时刻或位置的估计结果包括各时刻或位置每个关键点的三维信息。本发明实施例的方法和装置能够降低估计结果误差和估计结果的加速度误差，从而降低估计结果的抖动程度。