数据资源汇聚的可视化建模技术研究与应用

摘要

随着计算机技术和电子商务的高速发展，企业可获取的信息数量和类型有了极大的增长，数据的采集、存储、处理和传播的数量也与日俱增。同时，由于大型企业、政府部门等大型信息系统建设具有阶段性和分布性特点，从而导致“信息孤岛”现象的存在。“信息孤岛”导致系统中大量冗余数据、垃圾数据的存在，使数据的一致性无法保证，大大降低了信息的利用率和使用效率。论文以解决这一问题为目标，关注数据集成研究的成果，对数据资源汇聚的可视化建模技术进行研究，给出了数据资源汇聚的可视化建模方法和应用，并提出了一种基于XML的数据汇聚模型。
　　论文给出了一种可视化的数据资源汇聚方式，实现了由最终用户主导，个性化的、即时的结果反馈方式。用户使用系统定义的各种转换规则，根据业务需求，对数据源进行合并、分组、筛选、变换、连接等操作，无需手动建立复杂的XQuery语句，方便用户使用，同时提高系统的可用性。
　　论文提出的数据汇聚建模方法，将各种分布的、异构的和动态的数据资源汇聚到一起，以统一的视图显示给用户，使用户能够以透明的方式访问这些数据源，维护数据源整体上的数据一致性，提高信息共享利用的效率。
　　最后，论文给出了一种基于XML的数据汇聚模型，定义了该模型中的资源接入公共接口、可视化汇聚流程建模工具和执行模型三大模块，并实现了数据汇聚中资源接入、模式映射和数据转换三方面功能。
　　论文研究成果在“XBus数据汇聚系统”中进行了具体应用，表明了论文研究工作的可用性和合理性，对数据资源汇聚提供了有效的解决方法。

目录

封面

声明

中文摘要

英文摘要

目录

Contents

1 绪 论

1.1 研究背景及现状

1.2 问题的提出

1.3论文主要内容

2 相关技术基础

2.1 数据集成与资源汇聚技术

2.2 ETL技术

2.3 中间文件转换技术

2.4 模式映射技术

2.5 本章小结

3 数据汇聚的可视化建模过程

3.1 数据源获取

3.2 数据规范化

3.3 数据转换

3.4 数据可视化

3.5 数据质量保证

3.6 本章小结

4 数据汇聚模型DAM

4.1 汇聚流程

4.2 DAM模型的概念结构

4.3 DAM模型的功能设计

4.4 本章小结

5 模型应用

5.1 XBus数据汇聚系统

5.2 模型应用方法

5.3 实例与结果评价

5.4 本章小结

6 结论

6.1 论文总结

6.2 下一步工作

致谢

参考文献

附 录

攻读硕士学位期间主要成果