关系型数据库

摘要： 关系型数据库是通用性非常强的数据库[1],从小型软件项目到大型的互联网项目都适用,关系型数据库用行和列的形式来存储数据,持久化记录数据。对于一个业务系统,历史数据不会经常被访问,但是历史数据的存在会占用大量的存储和计算资源,这个时候就可以考虑对历史数据进行归档。和生活是中国移动全力打造的一站式生活服务平台,文章主要介绍在该平台上自主研发的基于关系型数据库的自动归档情境下的中间件架构设计。文章对该中间件的总体架构设计、主要流程设计和实施过程的关键问题做出说明,为大家提供一个完善的中间件架构设计过程,有利于推动相关中间件的研究与研发,填补数据归档领域中间件的空白。

摘要： 华为云GaussDB企业级分布式数据库推荐理由华为从2007年开始进行数据库内核方面的开发,于2011年启动分布式数据库内核研发,2014年发布商用版本的OLAP分布式数据库,2017年发布商用版本的OLTP分布式数据库,今年正式发布基于云服务的GaussDB(for openGauss)企业级分布式关系型数据库。

摘要： 本文结合关系型数据库的相关概念,梳理了基于关系型数据库的网络流数据预处理总体思路与步骤,并将该方法用于实践,分析了基于关系型数据库的网络流数据预处理效果,以期对技术人员进行数据处理有所启示。

摘要： “老冷,你考虑得怎么样了?参不参加轮岗计划?”又挂起了,看着屏幕上的错误弹窗,冷工失去了往日的挑战心境。怎么搞的?今天的工作效率出奇得低,为优化性能而写的一段小脚本就是调试不过。还是先冲杯咖啡,醒醒脑子再调试吧。冷工是某集团运维部的资深数据库运维专家,尤其擅长关系型数据库,在业界也是小有名气,连相关厂商的人员都要向其请教一二。可最近,他也遇到了一个小烦恼,原来公司倡导“复合型人才”.

摘要： 目前广泛采用的振动测试系统侧重于数据采集的精度、采样率等指标的提高,但数据预处理环节不足,智能化程度不高,测试人员面对分散数据,查询对比分析存在很大困难;为集中有效管理海量预处理数据,实现数据高性能查询分析,分别设计了面向查询结果和面向数据解耦关系的两套数据库;采用MySQL+Python架构实现了海量数据背景下全船振动数据的快速查询与分析等功能;经过多艘船舶的数据处理实践表明,该系统有效解决了振声数据的综合分析问题,具有一定的工程实际应用价值。

摘要： 为解决自动归档中间件架构设计等问题,本文以关系型数据库为例,在该类通用型较强的数据库作用下,提出以打造一站式生活服务平台等解决措施,同时在平台自主研发的基础上,发挥出关系型数据库的实用价值,并在自动归档的情景条件下,完善中间件的架构设计,以期为相关人员提供技术参考。

摘要： 世界上很多高价值的数据信息储存在关系数据库中,访问这些数据需要掌握专门的结构化查询语言(SQL),普通人很难直接使用.基于对现有对话机器人存在的问题和相关关键技术的梳理,本文融合了数据仓库、数据同步、数据库查询、消息推送、自然语言理解及语音识别等相关技术及产品,设计了数据库驱动的对话机器人.方案可以实现用户理解、消息推送、事实数据查询和分析数据查询四个功能,使得用户能够快速地获取信息.本文提出的数据库驱动的对话机器人具有较强的泛化性和可扩展性.

摘要： 本文针对网络教育快速发展的现状,完成了基于web的C语言题库管理系统.本系统主要包含了用户管理模块、题库管理模块、组卷模块以及试卷分析四大模块.系统用户主要分为学生、教师和管理员.系统采用了Springboot+Mybatis框架技术,以java为编程语言进行开发,数据库选择使用MySql关系型数据库,建立了12张数据表,实现了一个操作简单快捷、界面简洁、可根据题目难易程度进行组卷的C语言试题库管理系统.

摘要： 世界上很多高价值的数据信息储存在关系数据库中,访问这些数据需要掌握专门的结构化查询语言(SQL),普通人很难直接使用。基于对现有对话机器人存在的问题和相关关键技术的梳理,本文融合了数据仓库、数据同步、数据库查询、消息推送、自然语言理解及语音识别等相关技术及产品,设计了数据库驱动的对话机器人。方案可以实现用户理解、消息推送、事实数据查询和分析数据查询四个功能,使得用户能够快速地获取信息。本文提出的数据库驱动的对话机器人具有较强的泛化性和可扩展性。

摘要： 在煤田地质勘探实践中,积累了大量地质数据,以常规文件方式存储管理难以满足煤田勘探、开发、科研的需求.按照空间关系型数据库管理思路设计煤田地质勘探地理信息系统(geographic information system,GIS)空间数据库管理系统,以空间数据库和属性数据库服务器方式存储、管理煤田勘探地质数据,以数据库角色用户方式进行远程传输、更新、维护属性数据表,以共享文件夹传输、文件传输协议(file transfer protocol,FTP)文件传输、网页客户端平台方式维护数据文件,通过浏览器/服务器(browser/server,B/S)方式实现异地客户端地质数据空间复杂查询、下载等,实现信息共享,高级用户可通过数据库客户端直接访问数据表.煤田地质勘探空间数据库管理系统的实现,从根本上实现了复杂地质数据的科学化管理,提高了数据存储、访问、维护的便捷性、高效性、准确性和安全性,为煤田勘探地质数据的标准化存储、查询、维护、应用提出了新的方案,可以在煤田地质勘探中深入推广应用.

摘要： 工业基础类是建筑信息模型(Building Information Modelling,BIM)数据交换的标准格式,利用数据库实现IFC数据的高效管理对促进BIM的深度应用具有重要意义.当前研究主要利用Revit内置的导出功能将IFC数据直接导出为SQL Server关系型数据库,这种方式的缺点在于必须基于Revit,且导出的数据丢失了一些重要信息,如构件尺寸、物体顶点等.为此,本研究提出了一种能够从IFC数据自动映射到关系型数据库的通用转换方法,并结合实际数据对其进行了成效分析.结果表明:本研究提出的自动映射方法不仅较好地保证了信息传递的完整性,还提高了IFC数据的查询效率.这将有利于BIM在建筑业的深度应用,如支持智能建造等的实施.

摘要： 随着web应用的普及与数据量的爆炸性增长,NoSQL得到了广泛的应用,它具有传统数据库所不具有的高并发读写、高可拓展性和高可用性的优点.近年来,世界上各互联网公司纷纷根据自身业务的不同特性研发出符合自身的NoSQL数据库.针对关系型数据库已驰骋数据库领域数十年的特点,如何完成业务上由关系型数据库向NoSQL的平滑过渡成为不可避免的议题.本文首先分析了数据由关系型数据库向NoSQL数据库迁移的背景,并对向HBase迁移数据的几种方法进行了研究和分析.

摘要： 蚂蚁金服自主研发的通用关系型数据库;基于分布式架构和普通PC服务器,提供金融级高可用的云数据库服务;实现了金融级的数据一致性及数据可靠性;具备高可用、线性扩展、低成本、高性能等核心技术优势.

摘要： 针对数据资源不完整、数据资源分散、数据联动困难、信息共享不足、业务协同困难、数据溯源不及时等问题,提出了基于关系型数据库、非关系型数据库与空间数据库建立数字水文平台的总体思路,研究了多源异构数据的存储与组织、磁光电混合存储数据库、水文同义词词表与词表检索、光盘数据库全文检索、数字水文平台检索等关键技术,提升了水文信息资源共享应用水平,推动了水文科技进步,为数字水文、数字水利和数字经济建设提供了可借鉴的经验.

摘要： 以Java EE技术为基础,开发实现了一个基于Java EE的数据库后台管理代码生成框架.该框架使用B/S系统架构,实现对关系型数据库(Mysql,Oracle)的增加、删除、修改和查询,同时支持一对一、一对多、多对一和多对多关系的查询.框架可以根据数据库直接生成持久层、业务层、表示层的代码,其中持久层和业务层使用设计模式,使得代码具有良好的可扩展性.

摘要： 目前智能交通管理数据资源中心的传统系统架构和数据处理方法,其在数据存储和处理智能交通管理大数据方面已经开始出现如下瓶颈:交通管理数据越来越海量、交通管理业务应用越来越复杂、数据查询响应速度越来越慢.本文提出了采用Hadoop和MPP技术混合架构进行智能交通管理大数据资源平台架构设计的思想和实现方法;其核心部分归类包括数据存储层、业务应用服务模型层和平台应用接口层,数据存储层和业务应用服务模型层为上层交通管理应用提供计算资源、存储资源和大数据挖掘分析,平台应用接口层涵盖了在公安智能交通管理方面常见的业务应用接口,为业务应用平台提供支持;通过大数据平台构建从而有效提升智能交通管理大数据存储和处理分析的效率与性能,为提升智能交通管理业务水平打下基础.

摘要： 简述了有状态架构所面临的挑战，传统关系型数据库所面临的挑战，介绍了弹性架构扩展系统，分析了GemFire整体分布式架构，以及GemFire主要拓扑结构。

摘要： 随着移动通信技术的不断发展,使各个地区的网络结构愈发复杂,不同厂家不同网络制式共同组网的情况越来越多,网络监控与优化所依赖的网管数据分析难度越来越大;本文针对电信网管数据的分析优化,进行了一种便于分析的可视化数据系统的研究,设计实现了一种基于PostgresSQL与Tableau的可视化分析系统.

摘要： 随着移动通信技术的不断发展,使各个地区的网络结构愈发复杂,不同厂家不同网络制式共同组网的情况越来越多,网络监控与优化所依赖的网管数据分析难度越来越大;本文针对电信网管数据的分析优化,进行了一种便于分析的可视化数据系统的研究,设计实现了一种基于PostgresSQL与Tableau的可视化分析系统.

摘要： 随着移动通信技术的不断发展,使各个地区的网络结构愈发复杂,不同厂家不同网络制式共同组网的情况越来越多,网络监控与优化所依赖的网管数据分析难度越来越大;本文针对电信网管数据的分析优化,进行了一种便于分析的可视化数据系统的研究,设计实现了一种基于PostgresSQL与Tableau的可视化分析系统.

摘要： 本发明涉及一种从非关系型数据库到关系型数据库的数据迁移方法,包括如下步骤：连接需要进行数据迁移的非关系型数据库，获取数据库中的表格信息；选择需要进行数据迁移的表和数据库模式定义方法，其中可选择的数据库模式定义方法包括用户自定义、并集兼容、交集兼容、首条数据；将信息从非关系型数据库中导出到定义的xml文件中；将非关系型数据库的数据库设计模式转变成对应的关系型数据库的设计模式；连接对应的关系型数据库，根据xml文件中的数据库设计模式，建立对应的数据表；按照index元素中的索引信息，建立对应的索引。本发明解决了非关系数据库（如MonogDB）到关系型数据库进行数据迁移时所具有的反范式设计、无模式化和特殊数据类型的问题。

摘要： 本发明提供了一种关系型数据库扩展方法及关系型数据库扩展系统。数据库表包括扩展字段，所述扩展字段中存储有由类文件序列化的预设格式文本，从所述扩展字段中读取所述预设格式文本的内容，将所述预设格式文本的内容反序列化成相匹配的类文件；响应对所述类文件的操作，将操作后的类文件序列化成所述预设格式文本存储到所述扩展字段中。利用本发明可以减少每次需求升级所带来的数据库表的设计开发工作和变更工作。

摘要： 本发明公开了一种关系型数据库与非关系型数据库的同步系统及方法，主要透过配置模块配置非关系型数据库中的文档字段与关系型数据库中的表字段的对应关系，并形成配置关系文档；读取模块根据该配置模块所生成的配置关系文档的文档名及由计时模块所提供的时间区域自该非关系型数据库读取相关数据；计时模块记录该读取模块访问该非关系型数据库的时间，提供上次访问时间至本次访问的时间区域给该读取模块；转换模块根据读取模块所读取的相关数据以及配置模块存储的配置关系文档生成针对该关系型数据库操作的命令语句；以及执行模块根据该转换模块生成的命令语句对该关系型数据库执行命令操作。

摘要： 本申请公开一种将非关系型数据库数据转换到关系型数据库的方法及装置。该方法包括：由非关系数据库获取数据；通过配置信息对所述数据进行筛选，以获得第一数据；通过预定规则对所述第一数据进行数据转换，以获得第二数据；以及建立数据库连接，将所述第二数据储存到关系型数据库中。本申请公开的将非关系型数据库数据转换到关系型数据库的方法，能够将非关系型数据库的数据自动、高效的转换到关系型数据库中，节约人力与时间成本。

摘要： 本发明提供一种使用KETTLE从关系型数据库向非关系型数据库定时增量更新数据的方法，首先创建kettle job；lastKey；lastKey用来记录当前Hbase中数据的最大标识，可以存在关系型数据库、Hbase或者文件中；获取currentMaxKey；抽取数据；创建一个transition，用于数据抽取；更新lastKey；使用定时器；定时器可以使用kettle的job自带的定时器。本发明和现有技术相比，使用kettle的组件实现从关系型数据库向非关系型数据库定时增量更新数据，解决了不同数据源的数据同步到云平台的问题，具有很好的推广使用价值。

摘要： 本发明涉及一种从非关系型数据库到关系型数据库的数据迁移方法,包括如下步骤：连接需要进行数据迁移的非关系型数据库，获取数据库中的表格信息；选择需要进行数据迁移的表和数据库模式定义方法，其中可选择的数据库模式定义方法包括用户自定义、并集兼容、交集兼容、首条数据；将信息从非关系型数据库中导出到定义的xml文件中；将非关系型数据库的数据库设计模式转变成对应的关系型数据库的设计模式；连接对应的关系型数据库，根据xml文件中的数据库设计模式，建立对应的数据表；按照index元素中的索引信息，建立对应的索引。本发明解决了非关系数据库（如MonogDB）到关系型数据库进行数据迁移时所具有的反范式设计、无模式化和特殊数据类型的问题。

摘要： 本发明公开了一种关系型数据库到非关系型数据库的同步方法和系统，包括配置模块、读取模块、计时模块、转换模块、执行模块、处理模块和同步模块，还包括了兼容数据库，本发明解决了目前兼容数据在非关系型数据库和关系型数据库的存储的问题，将非关系型数据库和关系型数据库之间形成相互兼容的数据处理关系，并通过计时模块记录执行时间和读取时间，通过执行时间和读取时间生成上次的执行命令和执行结果，并将多次执行命令和执行结果形成新的兼容数据库，在下次配置后优先访问兼容数据库，从而实现快速转化和读取。

摘要： 本发明涉及数据库领域，特别是涉及一种关系型数据库到非关系型数据库的同步方法和系统。具体为：解析源端的关系型数据库的数据库日志，获取源端的关系型数据库中需要同步的事务的标记信息和变更数据信息；根据事务的变更数据信息生成相应的SQL语句；将事务的同步信息发送至目的端；目的端按照接收到的事务的标记信息对事务进行分类，并按照事务分类对同步信息进行保存；将同步信息转换为通用数据交换格式的数据；使用转换后的通用数据交换格式的数据对目的端的非关系型数据库进行同步更新。本发明通过将源端的关系型数据库中的数据变化转换为目的端的非关系型数据库可接受的数据形式，完成关系型数据库向非关系型数据库的数据同步。

摘要： 本发明涉及基于ETL工具从关系型数据库向非关系型数据库更新的方法，包括如下步骤：通过ETL工具的采集器采集各平台的源数据，进而得到目标数据；将采集到的目标数据存储进关系数据库中；从关系型数据库中提取目标数据作为待处理数据，将待处理数据作为格式为二进制Avro数据的中间态数据；将二进制Avro数据格式的待处理数据转化为JSON格式的待处理数据；将得到的JSON格式的待处理数据，通过FlowFile流数据的形式暂存在本地磁盘，得到暂存的待处理数据；通过ETL工具将暂存的待处理数据存储进非关系型数据库。本发明的方法可配置性高、过程可控性强，能够准确定位错误发生的环节，节省了查找错误的时间。

摘要： 本发明公开了一种关系型数据库与非关系型数据库的同步系统及方法，主要透过配置模块配置非关系型数据库中的文档字段与关系型数据库中的表字段的对应关系，并形成配置关系文档；读取模块根据该配置模块所生成的配置关系文档的文档名及由计时模块所提供的时间区域自该非关系型数据库读取相关数据；计时模块记录该读取模块访问该非关系型数据库的时间，提供上次访问时间至本次访问的时间区域给该读取模块；转换模块根据读取模块所读取的相关数据以及配置模块存储的配置关系文档生成针对该关系型数据库操作的命令语句；以及执行模块根据该转换模块生成的命令语句对该关系型数据库执行命令操作。