数据入库

摘要： 随着测绘与地理信息产业的蓬勃发展,许多绘图软件应运而生,也因此产生了多种多样的专用数据格式,当需要建设数字化地形图数据库时,多源异构数据必须转换成统一格式的入库数据。本文基于EPS平台的信息映射技术,提出一套可行的DWG地形数据整理入库方法,并运用此方法对珠海约365 km^(2)的1∶500地形图进行了数据入库,取得了良好效果。

摘要： “咱不动产登记窗口的工作人员效率真高,本想着一个月才能把证拿到手,没想到一个小时就办完了。”近日,平顶山市亿成建筑有限公司法人代表叶海滨接过刚办好的不动产登记证书后,高兴地说。原来,平顶山市不动产登记中心在走访该公司时,了解到公司急需办理不动产登记证书,便主动为该公司提供帮助,完善登记所需相关手续,从权籍调查、数据入库等前期准备工作,到受理、审核、登簿发证,开展一条龙便捷服务,帮助企业解决难题,确保亿成公司在短时间内拿到了不动产登记证书。

摘要： 基础数据入库是建设数字城市的重要环节,本文主要论述了CAD基础数据入库会出现的一些问题。在此基础上,采用基于iData的数据入库技术,结合实际生产项目,得出结论:该技术方法能够解决传统技术存在的问题。

摘要： 主要研究AutoCAD VBA在全要素基础地形数据转换入库中的应用,基于AutoCAD VBA定制应用程序,批量完成部分要素属性赋值,从而提高了工作效率。

摘要： 城市地下管线普查数据质检系统可有效帮助探测人员进行探测成果的检查,保障地下管线空间数据的质量。分析了长江流域各探测单位地下管线的探测成果,根据地下管线数据的质检要求,建立了一套空间数据质量模型评价体系;并结合探测单位和业主单位的实际使用情况设计了数据标准化、数据空间化、数据提交、数据复核、数据入库5个流程。基于ArcGIS Engine完成了地下管线质检入库系统的开发,并以重庆市测区管线数据为例,验证了数据质检和入库功能的准确率和正确性。

摘要： 为满足各省多测合一地方技术标准对地下管线数据格式不一的需求,本文基于AutoCAD VBA二次技术,开发一套既兼容国标又符合多测合一地方技术要求的管线数据编辑、入库及成果输出软件。在莆田市地方多测合一项目中应用一年多以来,该软件能够满足地方多测合一需要,对相关项目具有一定的借鉴意义。

摘要： 用电信息采集系统承载上海市1 000余万电力用户用电信息采集,是拓展智能表非计量功能应用、实现电力数据智能化采集的重要手段。随着用户规模与数据频度不断提高,上一代用采系统逐渐无法满足外部业务数据要求。笔者从大数据技术入手,比较了原有Oracle计算与大数据技术之间的优缺点。实际效果及仿真结果表明,大数据技术对用电信息采集系统创新影响是巨大的,基于大数据技术的用电信息采集系统承载力、计算效率、任务处理能力都得到了指数级的提升,创新效果比较理想。

摘要： 为满足数字城市建设过程中对基础测绘数据的共享需求,基础测绘地理信息数据库更新工作意义重大,该项工作是支撑自然资源管理和国民经济建设的基础性工作。对基础测绘地理信息数据库更新的必要性和技术进展进行阐述,即利用三维全息手段进行基础测绘地理信息数据库更新的技术路线,并按照数据更新的管理需要设计数据库管理系统,从而实现基础地理信息数据的入库、更新和管理工作。同时对基础地理信息数据库更新方法进行总结并分析其应用价值。

摘要： 本文基于山东省气象大数据云平台“天擎”,采用Storm流式处理技术,从数据收集、数据解码、数据入库、数据监控等方面设计数据处理原型,解决2021年4月标准格式切换后非考核地面气象自动站数据无法提供数据服务的难题,并与多线程处理程序进行时效对比,实践表明,基于Storm的数据处理程序更能满足现有业务系统对数据时效的要求。

摘要： 针对测量标志普查维护工作的开展,利用试点进行分析研究,从测量标志的分类保护、普查、维护、入库、宣传和巡查、托管机制等各项环节,详细阐述了省级测量标志普查维护项目的技术路线和作业流程,以期为类似测量标志普查维护工作提供借鉴。

摘要： 本文简要介绍北京市地下管线基础信息普查的实施过程与技术要点,总结在数据入库过程中遇到的各类问题及解决方法.

摘要： 城镇地籍基础业务数据是国土资源调查工作中一项重要的基础数据,主要包括地籍调查、勘测定界以及土地登记的各类图件和信息.保证数据入库的全面、及时、准确对于国土资源数据日常管理及应用意义重大.基于南京市城镇地籍基础业务的规范化建设,从数据入库错误类型及影响、入库方法及机制的改进等方面提出了数据入库规范化建设的方案.

摘要： 基于利用宁波市地下管线监理成图系统,以北仑区地下管线数据入库项目为例,逐项介绍了在该系统中进行管线数据检查、编辑、入库等过程的质量检查与数据处理方法,并就如何处理管线数据入库过程中出现的诸如接边、属性等问题进行了分析和探讨.

摘要： 温州市个人住房信息系统建设与完善需要数字房产项目的不断推进.Emap项目测绘系统作为人工半智能化程序,逐渐代替人工计算并对房产数据的格式与要素做了规定,实现了面积统计计算与数据入库一体化.

摘要： 在我国城市规划体系中,控制性详细规划是连接城市总体规划与修建性详细规划、规划设计与管理实施之间的桥梁,具有承上启下的作用,在城市规划管理过程中起着举足轻重的作用,如何利用GIS等信息技术对控制性详细规划成果进行科学管理,对提高规划审批的科学性、工作效率、透明度有着重大的实际意义.本文从规划信息化管理工作的实际出发,探讨了如何将城市设计的控制性详细规划编制成果进行规整入库,对在控制性详细规划数据规整入库过程中遇到的问题进行了分析和列举,并结合实际提出了解决方案,这对下一步将规划编制成果深入融合到规划管理体系中具有非常积极的意义.

摘要： 农村集体土地所有权是不动产登记的重要组成部分,宁夏农村集体土地所有权确权登记发证工作是土地调查工作的一项重要内容,将其县级成果汇总建库,构建具有较强现势性的农村集体土地所有权数据库系统十分必要.本文以GIS为手段,研究和探讨了自治区级数据库建库流程、建设方法,为不动产登记、农村土地资源信息的社会化服务等奠定了基础,以期满足经济社会发展、土地宏观调控及国土资源管理的需要.建库服务器操作系统为Windows Server2003，服务器端配置Oracle数据库。客户端需安装Windows dotNetFramework3.5环境和GIS平台的Runtime运行环境。为存储管理海量数据，数据库环境选用Orac1e10.2Client。数据处理软件主要为苍弯集体土地所有权管理系统，建库采用苍弯省市级土地三权数据库管理系统。硬件包括网络设备、服务器、计算机、数据存储设备等。在数据库管理系统中，根据县级数据库字段和Oracle数据库表结构配置MDB数据入库转换方案，然后选择相应县级数据包路径，确认好行政区编码、数据年度、坐标参考以及入库转换方案后，批量导入到Oracle数据库中。

摘要： 地籍在中国有着悠久的历史,它最初是被用来做为历代政府征收田赋税的依据.随着社会的发展,地籍的内涵也在不断地扩大,先后经历了税收地籍、产权地籍和多用途地籍三个阶段.随着科技的发展,特别是计算机、航测遥感、地理信息系统及卫星定位等技术的发展与广泛应用,数字地籍也随之应运而生,使得地籍进入数字地籍时代,其特征主要体现在技术手段的革新上,以GIS、GPS、RS为主要技术手段,实现地籍数据采集处理存储及管理应用全过程的数字化.目前我国许多城市已经建立城镇地籍信息系统，并被广泛应用于城镇土地资源的日常管理，为城市建设和发展提供了基础保障。地籍数据的基础存储分为空间数据分类存储结构、权属数据存储结构。地籍数据库要求数据结构完整、空间数据正确、属性数据完整、汇总表格完整。建库前要进行图面检查、拓扑检查、代码检查、几何结构检查。数据库入库分为图层转换、属性表转换、编码转换、地籍号转换几个流程。入库后要进行符号代码、属性、调查表数据、生成成果的检查。地籍信息管理系统作为维护国家土地制度的工具，在现代地籍管理中将得到更加广泛的应用。

摘要： 规划信息化发展需求越来越大,"三分技术""七分管理""十二分数据",说明数据对规划信息化工作的重要地位.面对信息化数据管理及应用的强烈诉求,本文从规划信息化数据管理及应用现状分析着手,建立一套有效的数据入库管理与增量更新机制,确保数据的完备性、现势性与安全性,充分挖掘数据资源信息,实现规划信息化管理下数据的共享交换与应用分析,提高了规划数据资源的决策性应用与规划信息化管理工作效率.

摘要： 城市规划数据是城市建设、项目审批的重要依据,也是规划信息系统中一个重要的组成部分,是信息化应用中的数据基础,主要包括总体规划、分区规划、控制性详细规划、修建性详细规划、专业专项规划等.本文以总体规划和控制性详细规划为例,介绍城市规划数据在生产及入库过程中的质量控制.

摘要： 城市规划数据是城市建设、项目审批的重要依据,也是规划信息系统中一个重要的组成部分,是信息化应用中的数据基础,主要包括总体规划、分区规划、控制性详细规划、修建性详细规划、专业专项规划等.本文以总体规划和控制性详细规划为例,介绍城市规划数据在生产及入库过程中的质量控制.

摘要： 本发明的实施例提供了一种面向图数据库的数据自动入库方法、装置和设备。所述方法包括获取并解析待导入的图数据的配置文件；根据预设的结构定义规则对所述配置文件进行格式转换；将格式转换后的配置文件以及对应的图数据导入图数据库。以此方式，能够对支持范围内的任何图数据进行描述，从而使程序能够以统一的方式进行数据的导入，提升了入库效率，降低了错误率。

摘要： 本发明提供了一种基于元数据的全息数字电网数据自动入库系统，该系统包括：用于获取待入库的输电、变电、配电各专业遥感数据，确定遥感数据对应的元数据以及元数据原始完整标记值的数据获取模块，用于判断遥感数据格式，并计算确定元数据的完整性的数据初检查模块，用于将满足要求的数据加密上传的数据上传模块，以及用于解析上传后遥感数据的元数据，并根据元数据信息将遥感数据和元数据自动入库的数据解析导入模块。采用上述系统能够实现输电、变电、配电各专业遥感数据及对应元数据的智能化自动入库，克服现有入库技术中费时费力、误差率高及保密性不佳的缺陷，同时大大提高了数据传输和入库结果的精确度，有利于数据库存储空间的合理利用。

摘要： 本发明实施例提供了一种线上数据库的数据增量入库方法、装置及系统，其中，所述方法包括：获取待入库增量文件；将待入库增量文件中的数据，加载至预先创建的中间数据库中；生成中间数据库中的待入库增量文件数据的脚本文件，得到目标脚本文件，其中，目标脚本文件用于指示将中间数据库中待入库增量文件的数据更新至线上目标数据库；执行目标脚本文件，将中间数据库中待入库增量文件的数据更新至线上目标数据库，实现了线上目标数据库的自动在线数据增量入库。

摘要： 本发明的实施例提供了一种面向图数据库的数据自动入库方法、装置和设备。所述方法包括获取并解析待导入的图数据的配置文件；根据预设的结构定义规则对所述配置文件进行格式转换；将格式转换后的配置文件以及对应的图数据导入图数据库。以此方式，能够对支持范围内的任何图数据进行描述，从而使程序能够以统一的方式进行数据的导入，提升了入库效率，降低了错误率。

摘要： 本申请提供了生成入库脚本以及数据入库的方案，该方案可以在每次数据入库时获取本次入库的源表和目标表的配置信息，并根据所述配置信息，对数据仓库中所述源表和目标表进行检查，自动化地发现源表和目标表数据结构的变化，并对其进行更新，进而根据所述源表与目标表的数据结构，动态生成入库脚本，无需在数据表的数据结构更新时，由开发人员持续手工维护数据表的数据结构和入库脚本，由此通过执行该入库脚本可以实现数据的自动化入库，从而降低时间、人员的成本以及出错的概率。

摘要： 本发明公开了一种基于Google S2实现Hbase数据库遥感大数据入库模型的设计方法，包括：通过Google S2算法实现遥感数据的格网化裁剪，用于将大范围整幅遥感影像进行分区、分片及地面空间离散化，方便影像数据的存储管理；Hbase数据库的表存储模型的建立，实现了对分区遥感影像在多个维度的属性表述，并通过数据波段离散存储的方式实现多源异构遥感影像数据的数据结构整合。本发明充分考虑了不同种类遥感影像数据的特点，实现了遥感大数据的高效存储，满足了用户不同应用场景下的需求，并有效地兼顾了系统的可扩展性和数据均衡。

摘要： 本发明公开了一种数据类型识别方法及装置、数据入库方法及装置，其中，在该数据类型识别方法，包括：S1获取待识别的列数据，列数据中包括列头和数据内容；S2提取列数据的特征得到特征向量，特征向量中包括列头特征及数据内容特征；S3将特征向量输入预训练的分类模型中对其进行分类，完成对列数据的识别。其根据列数据的列头和数据内容得到特征向量，输入预训练的分类模型中对其进行分类，得到其所属语义属性，完成对结构化数据类型的识别，简单方便，且效率高，无需人工的介入，大大节约了人力物力。

摘要： 本申请提供了生成入库脚本以及数据入库的方案，该方案可以在每次数据入库时获取本次入库的源表和目标表的配置信息，并根据所述配置信息，对数据仓库中所述源表和目标表进行检查，自动化地发现源表和目标表数据结构的变化，并对其进行更新，进而根据所述源表与目标表的数据结构，动态生成入库脚本，无需在数据表的数据结构更新时，由开发人员持续手工维护数据表的数据结构和入库脚本，由此通过执行该入库脚本可以实现数据的自动化入库，从而降低时间、人员的成本以及出错的概率。

摘要： 本公开是关于一种多线程数据处理方法、多线程数据处理装置、多线程底库数据入库方法、多线程底库数据入库装置、电子设备和计算机可读存储介质。多线程数据处理方法包括：通过当前线程获取当前待处理数据，确定当前待处理数据所属的当前数据集合；响应于存在当前数据集合对应的当前数据锁且当前数据锁未激活，激活当前数据锁；通过当前线程对当前待处理数据进行数据处理；对当前待处理数据的数据处理完成后，删除当前数据锁；响应于不存在当前数据锁，通过当前线程对当前待处理数据进行数据处理或结束当前线程。通过对数据的划分及数据锁的动态操作，可以在保证数据安全的情况下，有效地提高系统处理能力。

摘要： 本申请提供了一种基于大数据的数据入库方法、装置、存储介质和处理器，该方法包括：采用分布式列存储数据库与分布式检索引擎建立基础存储数据库，分布式列存储数据库用于存储原始数据，分布式检索引擎用于存储原始数据的索引信息；根据基础存储数据库中的数据存储结构和数据存储格式，构建数据表；使用配置库的方式动态管理数据表；基于数据表进行数据入库。该方法通过采用分布式列存储数据库与分布式检索引擎建立基础存储数据库，实现了数据的快速检索和较大的数据吞吐量，使用规范的数据存储结构和数据存储格式构建数据表，进而通过配置库的方式管理动态管理数据表，实现数据的快速入库。