时序数据挖掘在交易所IT基础设施监控系统中的应用研究

摘要

数据挖掘是信息技术自然演化的结果，是摆脱“数据丰富，知识缺乏”困境的有效途径。它是从大量数据中挖掘出有用的知识的一种方法，其应用涉及、金融业、零售业、电行业和生物医学等众多行业。本论文就探讨了以业界标准为指导的数据挖掘技术在交易所IT基础设施监控系统中系统维护和决策方面的应用。 本文以国内某商品交易所IT基础设施监控系统项目为背景，在深入调研与分析国内外数据挖掘相关理论、技术、应用和标准文献的基础上，利用该系统中的数据作为实验对象，主要研究了数据挖掘过程中的以下几个问题：数据挖掘项目开发过程模型、数据预处理的流程和方法、数据挖掘语言的标准和时序数据处理技术。本论文的主要研究工作与成果有： ①针对目前的数据挖掘过程模型在实际应用中仅考虑数据挖掘技术，忽略了项目的规划、部署与数据挖掘技术协调的问题，本论文深入研究了数据挖掘过程标准Cross-Industry Process for Data Mining(跨行业数据挖掘过程标准，CRISP-DM)，并将其应用到具体的项目实施过程中，使数据挖掘技术能够更好地解决商业问题。 ②根据IT基础设施监控系统中数据的是典型的时序数据的事实，探讨了数据预处理技术和时序数据处理技术，在实际应用过程中对这些技术进行有针对性的定制，并将数据挖掘的最终结果以独立于系统和应用的Predictive Model Markup Language(预测模型标记语言，PMML)表达。 ③本文从项目实施的角度研究了数据挖掘技术的一个新应用，并使用了业界普遍采纳的标准和成熟的数据挖掘技术搭建了一个应用的框架。 经过反复的研究与论证，结果表明，本文的理论，方法与技术正确有效，为数据挖掘项目的开发提供了有效的理论指导，具有良好的实际应用前景，对以后类似的实践有一定的借鉴意义。

目录

文摘

英文文摘

声明

第一章绪论

1.1研究背景

1.2国内外研究现状

1.3本文主要研究内容

1.3.1作者的主要工作

1.3.2本文章节安排

1.4本章小结

第二章数据挖掘过程和语言

2.1数据挖掘过程及其标准

2.1.1数据挖掘过程和数据预处理

2.1.2 Fayyad的知识发现处理模型

2.1.3 CRISP-DM数据挖掘过程模型

2.1.4数据挖掘过程模型的分析和比较

2.1.5数据挖掘过程中的数据预处理

2.2数据挖掘语言及其标准

2.2.1数据挖掘语言概述

2.2.2数据挖掘语言的分类

2.2.3数据挖掘语言的分析和评价

2.2.4 PMML的产生和应用

2.3本章小结

第三章时间序列分析和时态数据挖掘

3.1时间序列分析

3.1.1时间序列分析的历史和现状

3.1.2时间序列问题的本质

3.1.3主要的时序分析技术

3.2时态数据挖掘研究

3.2.1时态数据的类型

3.2.2时态模式挖掘

3.2.3相似性研究

3.3本章小结

第四章数据挖掘在IT基础设施监控中的应用

4.1商业理解阶段

4.2数据理解阶段

4.2.1数据源简介

4.2.2系统数据的理解

4.3数据准备阶段

4.3.1示例数据集Ⅰ的预处理

4.3.2示例数据集Ⅱ的预处理

4.4模型建立阶段

4.5评估阶段

4.6部署阶段

4.7本章小结

第五章结论及未来的工作

5.1结论

5.2未来的工作

致谢

攻读硕士学位期间从事的科研工作

参考文献