基于网格的数据融合平台研究与设计

摘要

网格计算的概念是随着高性能计算的应用需求发展起来的，主要是从学术角度出发考虑广域网内计算机资源的共享，从而达到资源的最大化利用。随着互联网近年来的高速发展，网格中的信息资源也随之多样化，其类型由传统的结构化资源延伸到高度异构的半结构化和非结构化资源。如何搭建基于网格的数据融合平台，融合网格中海量的、动态的异构数据源，给用户提供统一、透明且基于一定语义的数据访问服务，成为了当前研究热点。 参考了一些传统的信息集成技术，本文针对此问题为数据源制定了一套新的面向对象的元数据描述规范，并在此基础上给出了一套包括全局数据模式、数据融合策略、数据访问机制等方面内容在内的较完整的数据融合平台设计方案。其中主要的研究内容和创新点如下： 1． 研究网格数据融合技术，设计并实现网格数据融合平台SGDAI，介绍其主要框架、特点以及设计目标，分析了该信息集成系统中主要模块之间的调用关系和功能。 2．提出了一套面向对象的元数据描述规范SGMDP。该规范以全局类为最小数据访问单位组织平台范围内的数据，并统一数据源提供者对数据的语义描述形式。平台通过整合数据源提供的类访问方法方便地向用户提供跨类跨数据源的异构数据访问服务。 3．提出一种基于聚类的有效类挖掘算法C－ECM 以优化平台的数据访问效率。该算法通过用户行为分析优化全局类视图，从而一定程度上弥补SGMDP为实现异构访问所牺牲的效率。 4． 采用一种多属性决策算法实现基于可信度的数据级融合工具SGDataFilter，从而为用户提供最有价值的数据。