热红外图像与可见光图像融合方法研究

摘要

图像融合是一门工程科学，也是一门艺术。作为图像工程的一个重要分支，30年来图像融合已发生了深刻的技术变革，图像融合规则、融合方法开始趋向于对人类大脑认知功能的模拟和视觉感知系统的模仿，图像融合正逐渐向智能化、抽象化的视觉理解方向迈进。
　　热红外与可见光图像融合一直是图像融合研究的热点，在军事侦查、安全监控等领域有着广泛的需求和应用。本文以热红外图像与可见光图像为研究对象，针对基于区域的图像融合框架的局限性，受认知图像融合思想的启发，提出了基于内容认知的图像融合框架模型。本文主要工作内容如下：
　　（1）分别介绍了多分辨率分析的图像融合中常用的Mallat、à trous、Contourlet及 NSCT四种算法。考虑到这四种算法在图像多尺度分解与重构时的相关性，选用Mallat算法，研究了多分辨率分析的热红外与可见光图像融合中尺度选择问题。研究结果表明，综合考虑融合图像的空间质量、保真度以及融合过程中的计算量和实时性等各方面因素，对图像进行3或4层分解时能取得更好的图像融合效果。在此基础上，进一步研究了基于区域的热红外与可见光图像融合。
　　（2）回顾和总结了基于像素、窗口、区域的图像融合规则，指出了目前常用的基于区域的图像融合框架模型的局限性；研究和分析了认知图像融合思想，受该思想的启发，根据人们对多源图像场景内容的理解和认知方式，提出了基于内容认知的图像融合框架模型，并将该模型应用于热红外与可见光图像融合当中。实验结果表明，该模型具有比基于区域的图像融合模型更好的融合效果，这一效果得益于该模型对不同图像内容可以同时分别选用空域或频域不同的融合算法和融合规则，能更大限度地发挥图像融合的自身优势。
　　（3）在基于内容认知的图像融合方法基础上，研究了基于内容认知与彩色传递的热红外与可见光图像彩色融合方法和基于内容认知与热红外图像反转的热红外与可见光图像彩色融合方法。实验结果表明，由于采用彩色传递技术，前一算法得到的彩色融合图像颜色自然、生动，接近于现实场景色彩信息；后一算法得到的彩色融合图像符合人们视觉感知特点，通过热红外图像反转，融合图像中温度高物体以红色显示，温度低物体以蓝色显示，更利于热目标的检测和识别。

目录

封面

声明

中文摘要

英文摘要

目录

第一章 绪 论

1.1 研究背景及意义

1.2 热红外与可见光图像融合研究与发展现状

1.3本文主要工作及章节安排

第二章 热红外图像与可见光图像预处理

2.1 热红外图像与可见光图像特点

2.2 图像去噪

2.3 图像增强

2.4 图像配准

2.5 图像插值与重采样

2.6 实验结果与分析

2.7 本章小结

第三章 多分辨率分析的图像融合方法

3.1小波变换基础

3.2 Mallat 算法

3.3 à trous算法

3.4 Contourlet算法

3.5 NSCT算法

3.6 基于多分辨率分析的图像融合中分解尺度的选取

3.7 基于区域的热红外图像与可见光图像融合方法研究

3.8 本章小结

第四章 基于内容认知的图像融合方法研究

4.1 图像融合：从像素、窗口、区域到认知

4.2 基于内容认知的图像融合框架的提出

4.3 基于内容认知的热红外图像与可见光图像融合实验

4.4 基于内容认知的图像融合框架与基于区域的图像融合框架对比

4.5 本章小结

第五章 基于内容认知的图像彩色融合方法研究

5.1 基于内容认知与彩色传递的热红外-可见光图像彩色融合方法

5.2 基于热红外图像反转的热红外-可见光图像彩色融合方法

5.3 本章小结

第六章 总结与展望

6.1 总结

6.2 展望

致谢

参考文献

攻硕期间取得的研究成果