数据仓库实视图一致性维护中的并发控制机制研究

摘要

数据源发生变化的时候,实视图就要相应更新,否则就会造成数据的不一致.数据源端除了数据更新以外,还会发生其它的变化,但到目前为止,对实视图维护的研究大部分只集中于对数据源端的数据更新引起的一不致,因此该文充分考虑到数据源的各种可能的变化,以客户关系管理系统客户关系管理系统的数据仓库中的数据维护问题为背景,在数据仓库端引入ODS,采用基于DB-ODS-DW的三层结构来设计实现数据仓库,并讨论了三层体系结构下的实视图维护问题.该文把视图的一致性维护问题分解到三层结构的ODS/DW和DW/ODS两个接口上分别实现,并且引入视图生成树的概念,在ODS/DB接口处采用基于改进嵌套事务模型的并发控制机制,联机维护ODS的数据,大大提高了视图维护过程中的并发度和灵活性.在DW/ODS接口处采用追加的方式,增量维护DW的数据,保证了DW的一致性.

目录

文摘

英文文摘

0引言

1问题的背景

1.1 CRM的基本概念

1.2 CRM系统的体系结构

1.3 CRM对数据处理的要求

1.4ODS的特点

1.5 ODS的引入

2基于DB-ODS-DW的三层体系结构

2.1 DB-DW两层结构的局限性

2.2 DB-ODS-DW三层体系结构

2.3视图分类

2.4用户操作和查询的“局部性原理”

2.5 ODS功能的扩充

2.6 ODS的设计

2.7小结

3实视图的一致性维护问题

3.1数据仓库的特征

3.2实视图

3.3数据源的变化

3.4数据源的各种变化之间的冲突

3.5实视图维护算法

3.6数据仓库的一致性

3.6.1实视图与数据源的一致性

3.6.2数据仓库实视图之间的一致性

3.6.3维护实视图的一致性的算法

3.7 DB-ODS-DW三层体系结构下视图一致性维护

4ODS的数据的一致性联机维护

4.1联机维护的研究现状分析

4.2基本定义

4.3关联多视图一致性

4.4视图生成森林

4.5简化的视图生成森林

4.6 ODS数据的特点

4.7确定相关视图集合

4.8 ODS/DB接口的设计

4.8.1监视器(Monitor)

4.8.2集成器(Integrator)

4.8.3更新检测部件(UDC)

4.8.4事务管理器(TM)

4.9改进的嵌套事务(Nested transaction)模型

4.9.1传统事务理论的发展

4.9.2相关研究成果

4.10事务的分解

4.11事务的执行

4.12结果分析

5 DW与ODS的一致性维护

5.1 DW中数据的特点

5.2聚集函数

5.3 DW/ODS接口的设计

5.4更新算法

5.5 DW数据追加的方式

6总结与展望

致谢

参考文献

硕士研究生期间发表论文情况