数据集市

摘要： 大数据背景下厦门银行审计系统平台的构建厦门银行从2019年启动审计系统平台(以下简称审计平台)建设,目前已初步建成。从功能上划分为审计风险数据集市、现场审计与非现场审计。(如图所示)。

摘要： 基于云平台的大数据分析能力,对海量数据进行分析和变现,构建煤矿大数据主数据管理系统及数据仓库,为平台运行管理和智能决策提供数据支持。煤矿大数据框架包括数据抽取加工、数据共享和交换、数据分析与预测等方面,最终构建主体数据模型库,从而形成数据集市,为综合管控平台各种应用提供数据支持。

摘要： 如何快速、便捷地发现有价值、多维度、隐藏的师资信息,支持高校师资管理决策,是高校师资管理改革的关键问题。联机分析处理提供了快速、一致、交互的多维度、多层次数据处理技术。文中提出了基于C/S模式的高校师资数据联机分析处理系统的体系结构和功能模块,设计了面向高校师资管理决策支持的独立数据集市;在此基础上,利用可视化程序设计语言和Microsoft SQL Server,实现了高校师资数据联机分析处理系统。实验结果表明,该系统能够实现多维多层数据分析,为高校师资管理决策支持提供有价值、多维度、多层次的信息。

摘要： 为解决水务集团传统生产运营管理存在的问题,采用数据规范化、数据采集、数据仓库、数据集市、可视化分析等技术,建设了集数据动态监测、阈值报警、监督管理、可视化统计分析、报表多级上报功能为一体的水务集团生产运营管理平台,服务于水务集团、水司、厂站、第三方监管单位等多级用户。平台建成后对减少人工提高生产运营管理效率,促进水务生产运营管理向自动化、智慧化转变具有重要的意义。

摘要： 数据分析模式的历史变迁2013年,数据分析模式以Data Hub数据枢纽的形式来进行。2017年,我们提出大数据3.0概念,区分于运用离散工具的数据平台,大数据3.0时代的最显著特征为一站式数据平台,同时可以覆盖数据全生命周期的处理。星环科技的一站式平台把数据湖、数据仓库、数据集市一体化,提供一套数据工具集Transwap studio处理各个阶段的数据。

摘要： 文章提出构建批量作业运行用时数据集市,统计分析不同历史周期的批量用时,通过关键路径动态自动计算,对当前动态运行的批量作业运行用时进行预测,进而计算出系统批量作业异常处置(批量中断)可容许最大时长,为业务、科技人员提供参考信息,为优化提高系统批量作业运行质量提供参考数据指标。

摘要： 职业院校的教学管理系统“信息孤岛”问题日益突出。为了在技术管理层面解决这一问题,在建设校园云数据中心的基础上,首先采用维度建模的方法,构建二级院部教学管理的数据集市,然后集成校级教学管理的数据仓库。满足二级管理模式下的各级管理人员对数据的统计、查询和分析需求。

摘要： 作为传统审计、数据化审计的高级阶段,智慧审计本质是以“人”为核心的数据化审计,实施智慧审计是审计事业高质量发展的必然要求和根本出路。基于此,本文以审计信息化、智能化提升为根本方向,阐释了大数据与智慧审计的关系。理论联系实际,依托于案例公司在大数据环境下构建的全息交互智慧审计体系,充分展现了企业推动审计工作机制与流程变革的决心。案例公司通过以大数据HADOOP为基础搭建审计“全息”数据集市,提高了审计数据的覆盖面,实现了全量审计;系统功能模块的有力支撑使得审计风险点固化,实现了企业风险防控的智慧化;循环迭代的“远程+现场”互动审计模式,激发了远程审计和现场审计的组合效用。综合案例公司的全息交互智慧审计体系而言,整体效果显著,期望能借此研究为大数据环境下实施智慧审计工作的企业提供有益参考。

摘要： 本文通过在数字化审计模式的基础上,讨论基于分布式数据库集群搭建的新一代审计数据集市对商业银行审计工作的意义、目标及作用.同时,进一步研究审计数据集市建设的具体流程,以及注意事项.最后,对审计数据集市的应用价值及成果转化进行了分析.

摘要： 高校智慧校园建设投入逐年加大,数据治理是新时期智慧校园建设的重要基础,将为学校教学、科研、管理和服务提供更加高效、精准的数据支撑.地方高校因重视和投入不足,数据治理工作滞后,导致数据质量差,标准不一,数据无法共享.针对智慧校园的应用需求,必须尽早开展数据治理工作,建立数据标准、数据资源体系和多样化的数据服务,从而为全校师生提供优质而精准的信息化服务.

摘要： 随着互联网和大数据的发展,很多行业也都依赖于新科技和新技术实现了行业的突破,在电力行业也依赖大数据和云计算等技术,实现了本行业的完善和发展,电力企业财务域数据集市的建立基于电力企业财务的大数据应用分析,财务域的数据集市主要运用的是大数据的运算和分析能力,通过财务数据分析在当前基础上如何提升企业的盈利方向,以及如何提升不同数据信息的价值密度.通过数据集市的服务,实现对电力企业各个领域以及各个业务之间数据资产的有效管理.

摘要： 本文在建立数据集市的基础上,利用数据挖掘集群和关联规则算法,从人员、机器、材料、法规、环境和测量系统等方面挖掘影响卷烟设备整体设备有效性的关键影响因素.对设备管理决策支持,优化设备管理考核机制,提高设备管理水平具有重要意义.

摘要： 本文提出了一种新的建立数据集市/数据仓库体系结构的方法,它使用同一数据加载机制同时向各数据集市和中心数据仓库加载数据,将当前数据和轻度综合数据加载到数据集市,将历史数据和共享数据加载到中心数据仓库,并通过二次集成将各部门高度综合的数据加载到中心数据仓库.这种结构既具有自底向上方法的优点,又具有自顶向下方法的优点,开发简单、数据结构统一;而且比联合方法优越的是,解决数据的重复存储,使数据存储结构更合理,提供的数据更符合各级决策者需要.

摘要： 为了满足企业用户对数据进行深入分析处理的需要,在研究数据集市的概念和特征的基础上,提出了构建企业数据集市的方法,并对数据的抽取、转换和装载以及联机分析处理等关键环节进行描述.通过数据集市技术企业可以快捷地构建面向实际分析处理应用的决策支持系统。随着企业不断走向信息化、网络化、一体化、全球化，市场竞争日趋激烈，而企业积累的数据越来越多，企业面临的业务处理和决策越来越多、越来越复杂，数据深入分析处理和科学决策的重要地位日益凸显。可以预见，数据集市将会在企业中得到越来越广泛的应用和取得更大的发展。

摘要： 介绍数据仓库的基本理论以及应用的关键技术，并以武钢国贸数据集市的建立为例，介绍数据集市设计和实施的过程，总结建设过程中遇到的问题和解决方法。

摘要： 数据集市可为企业提供产品设计知识处理的廉价途径.因此,在建立数据集市的基础上,提出了一种产品设计知识处理方法,设计人员通过CBR系统输入查询请求,由OLAP通过钻取、切片等操作完成相似实例的匹配,通过知识约简技术对OLAP输出的相似实例及其属性进行简化.利用了粗集理论对属性进行重要性的判断和约简,为处理定量问题,给出了一种新的离散化方法,并利用相似学理论度量实例的相似性,以提高检索准确性和检索效率.最后,给出了一个的应用实例.

摘要： 本文主要通过不锈钢分公司企业数据仓库能源管理数据集市系统功能的介绍,指出能源管理数据集市的开发和应用对提升分公司能源管理水平的重要意义。

摘要： 这些年中国不断加大产业转型升级速度,许多企业都在国家政策的影响下均对自身的管理模式以及理念进行了相应的调整,进而使其能够顺应中国未来发展的实际需求.目前,电力企业是中国重要的基础民生企业,其能够直接影响中国社会的正常运行.电力企业的财务管理水平能够在一定程度上影响电力企业的稳定发展.现阶段,在电力企业发展过程中,财务风险是不可避免的,为了降低财务风险所导致的经济损失,电力企业财务管理人员应加强预算管理以及风险管理研究,进而确保电力企业良性发展.

摘要： 本文介绍了不锈钢分公司数据仓库向冷轧延伸过程中,对原有的系统进行SAS平台升级改造,并介绍了延伸部分冷轧数据集市中的相关功能及在此次数据仓库改造过程中对过去存在问题的解决方法。

摘要： 本文从经营辅助决策系统产生的背景、数据中心的架构及建设思路、系统的实施、简介、特点、分析主题、成效、发展前景等八个方面进行介绍。北京烟草经营辅助决策系统是基于数据中心架构建设的系统，该系统的建立给各级领导的决策提供了快速、灵活、高效的数据支持。系统的建设符合烟草行业数据中心建设“统一标准、统一平台、统一数据库、统一网络”的四统一要求，正逐步建成“资源整合、功能完善、安全高效、信息共享”的北京烟草数据中心，初步实现了“数出一门”的目标。

摘要： 本公开涉及一种数据仓库和数据集市的管理方法及装置。该数据仓库和数据集市的管理方法包括：将数据源的生产数据抽取加工到Hadoop集群环境，在数据仓库集群中将数据按照第一数据存储架构存储；在所述Hadoop集群环境中，根据业务划分或者组织架构，创建相应的Hadoop集群用户；每个Hadoop集群用户下在数据集市集群上按照第二数据存储架构加工自身的数据模型，所述数据集市集群的数据来源于所述数据仓库集群。

摘要： 本发明公开了一种基于电网能源数据的数据集市层表建立方法，包括以下步骤：S01：针对收到的数据集市层表生成请求建立逻辑预估模型，对不同请求之间的逻辑预估模型进行综合重复度检查，如出现若干请求之间的逻辑预估模型重复度高于设置阈值，则保留其中一项请求，将其余请求删除；S02：对于未被删除的请求，根据该请求建立最终逻辑模型，并构建为对应的物理模型；S03：根据物理模型对数据库进行数据提取；S04：根据提取到的数据生成数据集市层表。本发明在任务前期通过判断实体重复度以及关系重复度，并汇总为综合重复度，以识别出内容相似的请求并删除，避免创建重复度过高的数据集市层表，防止运算资源浪费，提高数据处理效率。

摘要： 本发明公开了一种数据集市间共享数据的方法及装置。所述方法包括从数据仓库中抽取数据文件，将所述数据文件复制到预先设置的集市存储共享区，作为所述数据文件的一个副本文件；在数据集市服务器中创建与所述集市存储共享区内的所述副本文件对应的外部表，所述外部表中包含指向所述集市存储共享区内的所述副本文件的存储路径，以使数据集市通过查询所述外部表获取与所述外部表对应的副本文件。本发明实现多个数据集市间数据共享的目的，避免了存储资源的浪费，解决了数据集市之间数据访问的一致性问题。

摘要： 本发明涉及数据集市及数据仓库的技术领域，具体为一种用于数据集市和数据仓库的数据建模方法，包括以下步骤：搭建总线架构步骤：抽取业务系统主数据进行自动整合，获得公共的一致性维度，构建标准总线接口；数据处理步骤：对业务数据表进行分类，根据分类结果自动筛选数据抽取方式抽取业务数据表；模型整合步骤：通过反三范式对业务数据表进行组合、拆分形成事实表和多个维度表，根据事实表和多个维度表构建以事实表为主的维度模型。采用本方案能够解决现有技术中由于各独立型数据集市由各用户或部门独立构建，其数据架构互相独立，无法复用，容易造成数据孤岛，同时也无法保证企业数据的规范性、一致性和准确性的技术问题。

摘要： 本发明公开了一种基于电网能源数据的数据集市层表建立方法，包括以下步骤：S01：针对收到的数据集市层表生成请求建立逻辑预估模型，对不同请求之间的逻辑预估模型进行综合重复度检查，如出现若干请求之间的逻辑预估模型重复度高于设置阈值，则保留其中一项请求，将其余请求删除；S02：对于未被删除的请求，根据该请求建立最终逻辑模型，并构建为对应的物理模型；S03：根据物理模型对数据库进行数据提取；S04：根据提取到的数据生成数据集市层表。本发明在任务前期通过判断实体重复度以及关系重复度，并汇总为综合重复度，以识别出内容相似的请求并删除，避免创建重复度过高的数据集市层表，防止运算资源浪费，提高数据处理效率。

摘要： 本发明涉及一种基于数据集市的配用电大数据管理系统，该系统基于Hadoop分布式大数据平台，用于对配用电大数据进行集成、存储和索引，包括：数据集成模块：用于将包括全量数据和增量数据的电力大数据导入Hadoop分布式大数据平台进行数据集成，并构建数据集市；数据存储模块：用于对用户用电负荷数据进行存储；数据索引模块：用于利用时间序列对用户用电负荷数据进行索引，与现有技术相比，本发明具有满足电力数据应用需求、承载未来不断增长的海量数据且查询效率高等优点。

摘要： 本发明实施例公开了一种数据集市的数据提取方法、装置、终端及存储介质，其中该方法包括：接收业务终端发送的提取数据请求；根据所述提取数据请求以及所述数据集市的基本表创建数据视图；通过视图查询接口将所述数据视图对应的数据发送至所述业务终端。本发明实施例提供的一种数据集市的数据提取方法、装置、终端及存储介质，减少了数据集市的管理终端的资源浪费。

摘要： 本发明公开一种智能配用电大数据应用系统数据集市建立方法，将用户用电数据、电网运行数据等一系列基础数据通过不同的数据分析和挖掘手段，建成数据集市，为各个应用模块提供应用数据。数据集市基于数据处理为核心，进行数据采集、数据存储、数据清洗、数据分析，最终实现数据分析结果可视化展示的目的，实现大数据应用系统对数据的高速查询和检索。

摘要： 本公开涉及一种数据仓库和数据集市的管理方法及装置。该数据仓库和数据集市的管理方法包括：将数据源的生产数据抽取加工到Hadoop集群环境，在数据仓库集群中将数据按照第一数据存储架构存储；在所述Hadoop集群环境中，根据业务划分或者组织架构，创建相应的Hadoop集群用户；每个Hadoop集群用户下在数据集市集群上按照第二数据存储架构加工自身的数据模型，所述数据集市集群的数据来源于所述数据仓库集群。

摘要： 本发明提供一种基于多数据集市的煤矿多维数据仓库系统，包括四层构架：数据源、ETL模块、数据仓库/数据集市以及客户端。本系统覆盖了煤矿企业数据处理中从数据源获取到数据集成供企业决策者使用的全部过程，多数据集市之间引入共同维的思想，实现数据集市之间的跨链接功能，ETL模块采用ODS增量数据ETL架构，满足企业实时快速准确获得数据的需求。本发明开发的系统可以全面管理企业数据，为企业提供高质量数据，更有针对性的向企业决策者提供所需数据。