单目图像的上半身人体三维姿态重构研究

摘要

人体三维姿态重构是指通过从单视角、多视角拍摄的数字图像或视频序列中恢复出目标人体的三维空间信息的过程。基于单目图像的人体三维重构主要是根据给定的单目图像，通过提取目标人体的轮廓、颜色、形状等图像特征，并且采用相关的算法对这些特征进行深入的分析应用，从而计算得出相应的人体姿态三维信息。由于无法获得目标的深度信息，仅仅根据单目图像或是拍摄于单视角的图像序列进行人体三维姿态的重构是非常具有挑战性的。本文针对单摄像机拍摄的图像或视频中的人体姿态估计问题，回顾并且总结了目前较为常用的人体二维姿态估计及三维重建的相关算法，利用人体树状模型，实现了人体上半身的二维肢体检测，同时根据二维检测结果进行三维姿态动态跟踪，基于三维姿态跟踪数据，恢复和估计以参数表示的人体姿态，生成人体三维运动模型，求解真实人体在三维世界坐标系中的位置和姿态参数。
　　本研究主要内容包括：⑴针对人体上半身的各个肢体部分，用改进的形状上下文进行特征提取，并且分别进行离线学习，训练相应的分类器，对目标人体进行检测，得到具体部位的检测概率，并采用相关算法对检测结果进行优化，最终估计出人体上半身各肢体部位的位置。⑵在弱透视投影模型下，对摄像机参数求解过程进行简化，将7个待估计的摄像机参数简化为1个，大大地降低了算法的计算复杂度，提升了算法的效率。⑶将人体图像的二维关节点特征，与人体上半身三维姿态结合起来，并且采用基于关节点反投影误差的退火粒子滤波算法进行姿态跟踪，实现了人体上半身三维姿态重构。与此同时，建立了人体上半身二维-三维姿态转换系统，整合了单目图像三维姿态重构功能以及图像序列的三维姿态重构功能。⑷本文针对提出的算法，在多个数据库上进行了大量实验，实验结果显示，本文的算法能有效地估计人体上半身二维姿态，并在此基础上快速地重构出人体三维姿态。

目录

封面

中文摘要

英文摘要

目录

第一章 绪 论

1.1 引言

1.2 研究背景与现状

1.3 研究内容与创新

1.4 论文组织结构

第二章 图像的人体二维姿态估计

2.1 人体模型

2.2 图像特征

2.3 人体上半身二维姿态估计

2.4 实验及结果

2.5 本章小结

第三章 弱透视投影模型下的人体模型映射

3.1 投影模型

3.2 人体模型映射

3.3 本章小结

第四章 摄像机标定

4.1 内标定

4.2 外标定

4.3 本章小结

第五章 人体上半身三维姿态重构

5.1 三维骨架模型

5.2 退火粒子滤波

5.3 人体上半身骨架似然度计算

5.4 人体三维姿态重构

5.5 二维-三维姿态转换系统

5.6 实验及结果

5.7 本章小结

第六章 总结与展望

6.1 全文总结

6.2 研究展望

参考文献

致谢

攻读硕士学位期间已发表或录用的论文

声明