基于大数据技术处理方式的数字乡村人口信息管理系统

摘要

本发明公开了一种基于大数据技术处理方式的数字乡村人口信息管理系统，包括数据采集层、数据清洗转换层、数据层、应用层和基础支撑层；数据层主要由基础库、专题库、政务数据主权库三部分组成；基础支撑层包括硬件运行环境，管理平台软件运行环境两大内容；本发明通过对乡村实质的数据化，利用乡村业务管理及人口数据统计方式，结合智能设备设施及信息化系统软件，合理有效的提供城乡乡村治理、居民公共服务、智慧民生服务。最终，所有业务系统数据将沉淀为一套完整的数据底层，形成三大数据库，通过安全技术手段，实现民生数据的共享与交融。

说明书

技术领域

本发明属于大数据处理技术，具体涉及一种基于大数据技术处理方式的数字乡村人口信息管理系统。

背景技术

城乡乡村治理第一阶段中，以村级为单位的全域人口的数据管理以及数据应用问题是“数字乡村战略”所关注的重点领域；为了从根本上解决乡村人口信息采集难、归集难、人口底数不清、情况不明、如何高效应用的问题，建立村级人口、劳动力信息管理平台，主要解决人口数据不精准、各归口数据不一致、人口数据更新率低、管理成本高、人员变动情况无法及时掌握、无法发挥人口信息价值。

数据技术是指大数据的应用技术，涵盖各类大数据平台、大数据指数体系等大数据应用技术。大数据是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合。是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。随着云时代的来临，大数据也吸引了越来越多的关注。

发明内容

本发明要解决的技术问题是，将基础数据采集融合，为城乡乡村居民的管理提供保障且便利城乡乡村居民生活的基于大数据技术处理方式的数字乡村人口信息管理系统。

本发明的技术方案是：一种基于大数据技术处理方式的数字乡村人口信息管理系统，包括数据采集层、数据清洗转换层、数据层、应用层和基础支撑层；

所述数据采集层实现数据的采集功能，可提供多种采集方式，以满足数据接入不同IT平台特定现状的数据采集需求；

所述数据清洗转换层实现采集数据的清洗功能，提供多种清洗转换组件，以满足不同格式、不同内容数据转换的要求；管理平台同时提供数据加载的功能，实现清洗转换完成后的数据能及时、高效、正确地加载到目标存储中心，目标存储中心即云上服务器搭载的业务中台数据仓库；

所述数据层主要由基础库、专题库、政务数据主权库三部分组成，其中：

基础数据库：基础库是不同的IT平台、对内数据信息共享、对外信息开放的基础，也是构建设专题应用的重要依据；该部分主要由人员基础库、地区信息及户基础信息组成；

专题数据库：建立在基础数据库之上，并依据专题业务需求形成面向不同领域的专题库数据；

政务数据主权库：归集采集过来的审批数据信息等；

所述应用层包含两个方面的内容，一是业务应用，激活、完善数据层数据；二是数据融合与共享的应用；

所述基础支撑层包括硬件运行环境，管理平台软件运行环境两大内容；

硬件运行环境包括：计算资源、网络资源、存储资源等；为数字乡村人口管理平台提供计算能力；存储资源为各类信息资源提供数据存储服务；

软件运行环境包括：数据库、应用中间件及其他中间件和功能组件等。

具体地，所述数据采集层的采集功能，包括政务资源的数据采集、社会资源的数据采集；所述数据清洗层的清洗转换组件包括格式转换组件、字符转换组件、去重、转义、合并、计算等。

具体地，所述计算资源主要包括服务器；所述存储资源可采用本机磁盘或磁盘阵列。

具体地，所述采集方式包括全数据新增的方式，使用移动设备采取线上对人员数据进行采集，也可根据业务平台内已有数据回填，补充采集项，减轻核查工作、或根据各职能部门间的数据共享，补充所需采集项，进行自动回填。

具体地，所述管理平台的建立如下：

1）建立多维度人口数据采集渠道：建立村级人口采集小程序、数据采集人员和乡村网格员，打开采集小程序，即客户端，采集包括家庭户信息、家庭地理位置信息、户主基本信息、户成员信息、转移就业意向和职业技能培训需求、贫困信息、参保信息等；这些数据通过在线采集的方式，上传至人口信息管理平台后台数据库进行存储；同时，通过与政府大数据共享平台，第三方公司数据共享平台打通，保持人口数据动态化更新，实时获取；

2）建立数字乡村人口管理系统：通过建立数字乡村人口管理系统，将村级人口信息采集勘误后动态录入管理平台，以可视化动态监管模式进行呈现，数字乡村人口管理系统可根据用户需求自动生成智能统计表及政府台账，能够实时了解该地区人口概貌，建立智能管理体系，智能村域公共管理，智能人员管理等，以实现管理家庭户的基础户信息、房屋信息、住址信息、享受政策、扶持政策、智能预警，管理村/社区级别的公共信息、固定资产、经营产业、扶持政策、第三产业，建立个人智能画像，可以为个人用户提供就业、培训、社保等业务的办理，同时可以作为个人用户的实名基础信息，减少政务事件的实名办理流程；

3）建立数字乡村人口可视化BI大屏：基于数字数字乡村人口管理平台的数据归集，通过以区域为单位的人口基础信息，文化程度，贫困情况，技能掌握情况，就业情况等维度的统计，建立可视化视窗，能够快速的了解该地区劳动力的基本信息及动态变化情况，可以提供数据支撑。

具体地，所述数据层负责项目中业务功能实现流程的管理工作；同时数据层还要负责与应用层、基础支撑层的通信，这个过程需要bean类来协助传递信息，另外数据层还要负责请求的转发与从定向。

与现有技术比较，本发明的有益效果是：本发明通过对乡村实质的数据化，利用乡村业务管理及人口数据统计方式，结合智能设备设施及信息化系统软件，合理有效的提供城乡乡村治理、居民公共服务、智慧民生服务。最终，所有业务系统数据将沉淀为一套完整的数据底层，形成三大数据库，通过安全技术手段，实现民生数据的共享与交融。

附图说明

图1是本发明系统功能架构图；

图2是本发明系统技术架构图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明的部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。

一种基于大数据技术处理方式的数字乡村人口信息管理系统其特征在于：包括数据采集层、数据清洗转换层、数据层、应用层和基础支撑层；

数据采集层实现数据的采集功能，包括政务资源的数据采集、社会资源的数据采集，并提供多种采集方式，采集方式包括全数据新增的方式，使用移动设备采取线上对人员数据进行采集，也可根据业务平台内已有数据回填，补充采集项，减轻核查工作、或根据各职能部门间的数据共享，补充所需采集项，进行自动回填；以满足数据接入单位不同IT平台特定现状的数据采集需求。为保障数据采集的执行效率、异常处理，达到资源合理的利用；

数据清洗转换层实现采集数据的清洗功能，提供多种清洗转换组件，如：格式转换组件、字符转换组件、去重、转义、合并、计算等；以满足不同格式、不同内容数据转换的要求；平台同时提供数据加载的功能，实现清洗转换完成后的数据能及时、高效、正确地加载到目标存储中心；目标存储中心即云上服务器搭载的业务中台数据仓库；

数据层主要由基础库、专题库、政务数据主权库三部分组成，其中：

基础数据库：基础库是各单位IT平台、对内数据信息共享、对外信息开放的基础，也是构建设专题应用的重要依据；该部分主要由人员基础库、地区信息及户基础信息组成；

专题数据库：建立在基础库之上，并依据专题业务需求形成面向不同领域的专题库数据；

政务数据主权库：归集采集过来的各机关单位的审批数据信息等；

应用层包含两个方面的内容，一是业务应用，激活、完善数据层数据；二是数据融合与共享的应用；

基础支撑层包括硬件运行环境，管理平台软件运行环境两大内容；

硬件运行环境包括：计算资源、网络资源、存储资源等；计算资源主要包括服务器，为数字乡村人口管理平台提供计算能力；存储资源为各类信息资源提供数据存储服务，可采用本机磁盘或磁盘阵列；

软件运行环境包括：数据库、应用中间件及其他中间件和功能组件等。

如图2所示，上述系统还包括服务层是与客户的交互层，负责提交用户请求和数据，并将后台的响应结果返回给客户层。同时提供客户提交信息事的各种验证功能。

数据层负责项目中业务功能实现流程的管理工作。如：具体的业务功能由哪些类来实现，实现结果有谁来显示等等，必须由数据层来决定。同时数据层还要负责与其它两层的通信，这个过程还需要一些bean类来协助传递信息，另外数据层还要负责请求的转发与从定向。从数据层所负责的功能上不难想象的到在业务逻辑相对复杂的时候此层代码编写会略显繁重和复杂。

客户端主要是一些实现具体业务功能的类，在这里可以统一简称为entity类。也可以将架构中除了数据控制器之外的所有类统一叫做Javabean类。从这种命名方式上可以看出，客户端层在实现业务功能是具体的实现方式比较自由，但在业务逻辑比较复杂的情况下客户端层职能的划分会出现问题，可能会造成一定混乱和不便。设想一下如果可以更明确的将客户端层进一步划分使之变得更有条理，这样就会增强该层的可维护性了。

当存在数据采集需求，多部门数据采集联动的方式，全面推进各有关部门数据资源梳理，完成所有居民的多维数据采集；搭建数据采集的常态机制；推进政府数据多维交换共享机制；初步完成就业、民政、扶贫、社保、移民、卫计等部门基础数据的融合、共享与深度应用。

如图1所示，管理平台的建立如下：

1）建立多维度人口数据采集渠道：建立村级人口采集小程序、数据采集人员和乡村网格员，打开采集小程序，即客户端，采集包括家庭户信息、家庭地理位置信息、户主基本信息、户成员信息、转移就业意向和职业技能培训需求、贫困信息、参保信息等；这些数据通过在线采集的方式，上传至人口信息管理平台后台数据库进行存储；同时，通过与政府大数据共享平台，第三方公司数据共享平台打通，保持人口数据动态化更新，实时获取；

2）建立数字乡村人口管理系统：通过建立数字乡村人口管理系统，将村级人口信息采集勘误后动态录入管理平台，以可视化动态监管模式进行呈现，数字乡村人口管理系统可根据用户需求自动生成智能统计表及政府台账，能够时了解该地区人口概貌，建立智能管理体系，智能村域公共管理，智能人员管理等，以实现管理家庭户的基础户信息、房屋信息、住址信息、享受政策、扶持政策、智能预警，管理村/社区级别的公共信息、固定资产、经营产业、扶持政策、第三产业，建立个人智能画像，可以为个人用户提供就业、培训、社保等业务的办理，同时可以作为个人用户的实名基础信息，减少政务事件的实名办理流程；

3）建立数字乡村人口可视化BI大屏：基于数字数字乡村人口管理平台的数据归集，通过以区域为单位的人口基础信息，文化程度，贫困情况，技能掌握情况，就业情况等维度的统计，建立可视化视窗，能够快速的了解该地区劳动力的基本信息及动态变化情况，可以提供数据支撑。

数字乡村人口信息的管理平台以村级为最小基础单位，提供智能村级人口数据采集核查、权限人口管理、智能数字报表服务、常态化数据预警监测上报体系、个人就业培训等民生服务。平台通过多维数据采集，搭建数据采集的常态机制，充分应用平台数据资源和技术能力，切实推进人口基础信息共建共享，强化人口数据的支撑，实现村级人口的智能信息化管理。

完成第一阶段数据人口管理体系建设后，应以人口数据作为服务基底，为城乡乡村居民提供智能公共服务，提高乡村服务供给能力，加快城乡乡村公共服务体系建设，健全城乡乡村服务机构，做好与城乡乡村居民利益密切相关的社会基础服务、居民办事服务、社会保障服务等公共服务事项。实现多维联动的民生服务方式，做好与城乡多村居民利益密切相关的劳动就业、乡村保障、卫生计生、教育事业、乡村服务、住房保障、文化体育等民生服务，拓展乡村居民民生服务渠道，便利城乡乡村居民生活。

以上公开的本发明优选实施例只是用于帮助阐述本发明。优选实施例并没有详尽叙述所有的细节，也不限制该发明仅为所述的具体实施方式。显然，根据本说明书的内容，可作很多的修改和变化。本说明书选取并具体描述实施例，是为了更好地解释本发明的原理和实际应用，从而使所属技术领域技术人员能很好地理解和利用本发明。