基于广义图像先验的图像超分辨率重建算法研究

摘要

随着图像技术的应用和网络数据的飞速增长，人们迫切需要获取具有高分辨率的图像数据。由于各种退化因素（如光学模糊、下采样和噪声）的影响，实际采集到图像的空间分辨率往往不高。在不改变现有感光技术和图像采集设备的前提下，图像超分辨率重建技术是一种有效提高图像空间分辨率的有力手段，在视频监控、医学成像、遥感监视，以及数字电视信号切换等领域，具有巨大的经济价值和广泛的应用前景，已成为图像处理领域中的一个研究热点。
　　针对图像超分辨率重建技术面临的关键性问题，本文在广义图像先验思想的指导下，主要从非线性映射关系的估计、训练样本的划分、特征子空间的构造、正则项的设计，以及非局部均值先验等方面，对单帧图像超分辨率重建算法进行了深入的研究，主要的研究成果有:
　　(1)提出了一种基于加权Boosting的超分辨率算法。针对每个待重建图像块，在核偏最小二乘回归估计过程中，引入加权Boosting补偿方案，自适应地计算出最佳成分矩阵，估计出目标高分辨率图像块的高频细节，一定程度上解决了传统的核偏最小二乘算法对所有图像块选用相同数目的主元成分导致计算量大问题，而且在重构图像质量上也有所改善。
　　(2)针对从大训练数据集里选取近邻块的速度不高问题，提出了一种基于聚类和加权Boosting的超分辨率算法。首先计算出低分辨率图像块的纹理特征向量，利用K-means聚类算法将大训练数据集划分成K个不同的训练子集，对于每个待重建图像块，在对应的训练子集里寻找与之相似的近邻块;然后使用加权Boosting回归模型来学习低分辨率和高分辨率图像块间的非线性映射关系，估计出重构图像中的高频细节，该算法具有较高的时间效率和较好的重建效果。
　　(3)针对低分辨率图像块的梯度特征向量在邻域嵌入关系中的匹配精度不高问题，提出了一种基于子空间投影和邻域嵌入的超分辨率算法。先将低分辨率图像块的高维梯度特征向量投影到核主元成分分析(Kernel Principal Component Analysis，KPCA)特征子空间上，然后将KPCA特征向量投影到基于核距离的局部保留投影(ModifiedLocality Preserving Projection，MLPP)特征子空间上，在MLPP特征子空间上选取近邻块，提高了待重建图像块与近邻块间的匹配精度。通过梯度特征向量间的相似度和比例因子计算出用于邻域嵌入的重构权值，与相应的训练高分辨率图像块一起近似表示出目标高分辨率图像块，有效地提高了超分辨率重建图像的质量。
　　(4)考虑到自然图像边缘的多方向性，以及边缘在其主方向上的组稀疏性，提出了一种基于方向稀疏和方向特征的超分辨率算法。先利用多尺度多方向的Curvelet变换提取图像的Curvelet系数，将这些系数划分成16个不同的集合，然后利用Curvelet逆变换对每个方向集合进行重构，得到对应的方向特征图像，构造出一个组合总变分正则项，有效保留边缘的全局和局部几何结构。利用低分辨率图像块中的亮度信息和方向特征信息，估计相似权值，构造出方向非局部均值正则项，该算法在保持清晰的图像边缘和恢复丰富的纹理细节方面取到了较好的结果。
　　(5)现有的非局部均值方法在近邻块的选取上很大程度依赖于搜索区域的选择，需要大量的经验研究时间。为此，提出了一种基于超像素分割和非局部均值的超分辨率算法，有效提高现有图像超分辨率算法的性能。该方法先利用超像素分割技术将图像划分成很多个形状不规则的区域，根据目标像素点的一个小邻域内超像素分割标签索引号，自适应地选择一个或多个超像素作为其搜索区域，并在该区域内进行近邻块的选取，获得较高的匹配精度，构造非局部均值正则项。在不需要对搜索窗宽度的经验研究情况下，提出的方法可以快速地寻找到更为匹配的近邻块，而且能进一步提高重构图像的质量。
　　综上所述，本文是在图像处理、机器学习和模式识别的基础上，对低高分辨率图像块间的非线性映射关系、近邻块的匹配精度和选取速度，以及图像边缘的方向特征结构这三方面进行了深入研究，提出了五种有效的单帧图像超分辨率重建算法，取得了比现有方法较好的重建效果，为解决图像超分辨率技术的关键问题提供了新的手段。

目录

声明

摘要

第1章 绪论

1．1 研究背景及意义

1．2 超分辨率重建的理论基础

1．2．1 在时域和频域上的理论分析

1．2．2 常用的图像退化模型

1．2．3 超分辨率重建的关键问题

1．3 图像超分辨率重建技术研究现状

1．3．1 基于插值的方法

1．3．2 基于重构的方法

1．3．3 基于学习的方法

1．3．4 基于混合型的方法

1．4 超分辨率重建图像的质量评价

1．4．1 主观质量评价方法

1．4．2 客观质量评价方法

1．5 论文的主要研究成果

1．6 论文的组织结构安排

第2章 基于加权Boosting的超分辨率算法

2．1 引言

2．2 基于KPLS的超分辨率算法

2．3 加权Boosting的超分辨率算法

2．3．1 加权Boosting原理

2．3．2 最佳成分矩阵

2．3．3 算法实现

2．3．4 复杂度分析

2．4 实验结果及分析

2．4．1 实验设置

2．4．2 实验结果

2．4．3 参数分析

2．5 本章小结

第3章 基于聚类和加权Boosting的超分辨率算法

3．1 引言

3．2 自然图像的特征提取方法

3．3 聚类和加权Boosting的超分辨率算法

3．3．1 基于聚类的训练子集提取方法

3．3．2 加权Boosting的回归模型

3．3．3 算法实现

3．3．4 复杂度分析

3．4 实验结果及分析

3．4．1 实验设置

3．4．2 对比实验结果

3．4．3 参数分析

3．5 本章小结

第4章 基于子空间投影和邻域嵌入的超分辨率算法

4．1 引言

4．2 基于邻域嵌入的超分辨率算法

4．3 子空间投影和邻域嵌入的超分辨率算法

4．3．1 二级子空间的构造

4．3．2 邻域嵌入的重构权重

4．3．3 算法实现

4．3．4 复杂度分析

4．4 实验结果及分析

4．4．1 实验设置

4．4．2 对比实验结果

4．4．3 邻域匹配及参数分析

4．5 本章小结

第5章 基于方向稀疏和方向特征的超分辨率算法

5．1 引言

5．2 基于方向总变分的超分辨率算法

5．3 方向稀疏和方向特征的超分辨率算法

5．3．1 基于Curvelet的方向特征提取

5．3．2 组合总变分正则项构造

5．3．3 方向非局部均值正则项构造

5．3．4 重建问题优化求解

5．3．5 算法实现

5．3．6 时间复杂度分析

5．4 实验结果及分析

5．4．1 实验设置

5．4．2 无噪测试图像对比实验

5．4．3 有噪测试图像对比实验

5．4．4 增益概率统计结果

5．4．5 参数分析

5．5 本章小结

第6章 基于超像素分割和非局部均值的超分辨率算法

6．1 引言

6．2 超像素分割

6．3 超像素分割和非局部均值的超分辨率算法

6．3．1 基于超像素的非局部正则项构造

6．3．2 图像去噪问题及其优化求解

6．3．3 超分辨率问题及其优化求解

6．3．4 算法实现

6．4 实验结果及分析

6．4．1 去噪对比实验及统计结果

6．4．2 超分辨率重建对比实验及统计结果

6．4．3 任意倍数放大的效果分析

6．5 本章小结

总结与展望

致谢

参考文献

攻读博士学位期间的学术论文及科研成果