基于数据仓库理论的税务数据分析平台数据存储研究

摘要

随着税务信息化建设的深入开展，特别是在国税系统内基本上已经以省级集中的模式完成了各个应用系统的数据集中工作，税务机关积累了大量的涉税信息，作为信息化高级阶段的数据分析利用已经渐渐成为税务信息化工作的重点。但目前数据分析工作存在诸多问题，突出表现在应用软件未能有效整合，资源分散严重，形成诸多“信息孤岛”。由于缺乏有效的分析手段，导致数据应用水平不高，难以为决策者提供综合、高效、准确的信息。因此总局提出了在“金税工程”三期全面实施之前，进行税务数据分析平台预研的任务，在应用集成尚难以完成的情况下先实现数据资源的有效整合，建立总局统一架构下的税务数据分析平台。 本论文在分析现有税务管理信息系统和数据分析工作的基础上，综合运用数据仓库理论和技术，研究了在税务数据分析平台上建立数据仓库的可行性，探讨了税务系统建设税务数据仓库的方法和步骤，设计了税务数据分析平台数据存储的数据模型和体系结构，并对数据存储设计中的技术难点进行了研究，重点解决一户式数据存储ODS、ETL、OLAP主题库设计中的难题，给出了具体实现方法。在本课题研究的基础上，将形成税务数据分析平台统一的数据存储结构，为数据分析利用以及今后的纳税评估、税收预测提供标准的、全面的数据源。

目录

文摘

英文文摘

声明

第一章绪论

1.1论文研究的背景与目的

1.2国内外发展状况及研究动态

1.2.1数据仓库技术的发展及应用

1.2.2税务系统数据仓库应用情况

1.3研究的内容、目标、方法和解决的主要问题

1.3.1内容

1.3.2目标和方法

1.3.3解决的主要问题

1.4论文的思路框架

第二章数据仓库概述

2.1数据仓库的基本概念

2.1.1数据仓库定义

2.1.2数据仓库的主要特点

2.2数据仓库的数据组织结构与组织形式

2.2.1数据仓库的数据组织结构

2.2.2粒度与分割

2.2.3数据仓库的数据组织形式

2.2.4数据仓库的数据追加

2.3数据仓库中的元数据(metadata)

2.4数据仓库体系结构

2.4.1数据仓库的基本体系结构

2.4.2数据仓库体系结构扩展

2.5数据仓库系统

2.5.1数据仓库系统体系结构

2.5.2数据仓库工具层及其分类

2.6 OLAP技术

2.6.1OLAP的出现

2.6.2 OLAP的基本分析动作

2.6.3 OLAP技术的实现

2.7数据仓库的设计方法与步骤

2.7.1概念模型设计

2.7.2技术准备工作

2.7.3逻辑模型设计

2.7.4物理模型设计

2.7.5数据仓库的生成

2.7.6数据仓库的维护

2.8数据仓库研究现状及发展趋势

第三章税务数据分析平台数据存储策略论证分析

3.1税务系统源数据现状分析

3.1.1综合征管软件

3.1.2增值税管理信息系统

3.1.3出口退税管理系统

3.1.4其它数据源

3.2数据分析平台建设数据仓库的可行性研究

3.3数据分析平台数据仓库建设的方法论研究

3.3.1理论分析

3.3.2实践选择

3.4数据分析平台ODS数据存储研究

3.5 OLAP技术选型分析

3.5.1 MOLAP与ROLAP技术的比较分析

3.5.2税务数据分析平台的选择

3.6数据存储平台选型

第四章数据存储设计

4.1整体架构

4.2实施步骤

4.3构建ODS

4.3.1 ODS现状

4.3.2异构数据库互联

4.3.3增量数据抽取

4.4构建OLAP

4.4.1 OLAP的应用范围

4.4.2 OLAP建模

4.4.3模型优化

4.4.4维表设计难点

4.5 ETL设计实现

4.5.1数据抽取(E)

4.5.2数据转换(T)

4.5.3数据加载(L)

4.5.4错误及异常处理

4.5.5数据发布

第五章数据存储实现

5.1 ODS编程举例

5.1.1建立DBLINK

5.1.2使用物化视图完成同构数据库增量刷新

5.1.3使用时间戳完成异构数据库增量刷新

5.1.4使用触发器完成增量刷新

5.2 ETL实现举例

5.3主题设计举例

5.3.1维表

5.3.2事实表

5.3.3主题设计

第六章总结与展望

6.1总结

6.2进一步研究的工作

参考文献

致谢