一种基于数据中台的社区综合治理的系统和方法

摘要

本发明涉及一种基于数据中台的社区综合治理的方法，其中，包括：利用基础设施进行数据采集；利用数据中台接收数据，对数据进行清洗包括检查数据一致性，处理无效值和缺失值，并存储在关系型数据库中；数据底板在数据库中提取地理位置信息数据在地图上进行标注；依据数据种类将数据存储在相应的主题库中；业务中台分为人员信息服务、地理管理与服务、数据智能服务、GIS服务以及智能应用服务；社区综合治理应用平台功能包括消防安全管理、特殊人群管理、街办及公安事务办理以及社区物业及生活服务，应用平台根据自身功能调取业务中台提供的共性服务。本发明能够提供重点场所巡查监管、人口管理、消防设施年检与维修管理的有效管控。

说明书

技术领域

本发明涉及社区管理技术，特别涉及一种基于数据中台的社区综合治理的系统和方法。

背景技术

社会治理中台是依托云计算、大数据、人工智能、GIS空间化等技术手段，整合政府和社会各类多源异构数据，围绕人、地、物、事、情、组织等社会治理全要素，通过标签模型、分析模型形成社会治理领域数据资源池以及网格化数据智能底板；整合人员信息服务、地址管理与服务、数据智能服务、GIS服务、智能应用服务等通用支撑能力，为社会治理领域重点人员管控、社区综合治理、基层治理(矛盾纠纷调解)、便民服务等上层应用输出标准数据服务能力和业务支撑能力，依据底板形成决策依据，并通过线下确认和数据变化反哺数据，形成闭环，辅助政府决策者宏观掌握区域内社会治理工作开展情况，做到底数清、情况明，精准施策。

社区综合治理是市域治理领域的典型应用，应用围绕人、地、事、物、组织等社会治理要素，需要整合政府和社会各类多源异构数据，并进行深度融合。对此社会治理中台提供由基础库、模型库、知识库及主题库组成的数据资源池，提取图谱分析服务、地图服务、智能分析服务、人口信息服务等共性服务进行支撑。在此系统中主要针对社区综合治理进行系统设计。

社区综合治理提供重点场所巡查监管、人口管理、消防设施年检与维修管理、疫情等突发应急状况的有效管控，资源调度以及面向基层群众的服务事项实现线上沟通与办理等功能。

社区综合治理主要针对社区存在的管理混乱、信息重复收集、数据资源分散等问题和智慧社区治安防控立体化、服务管控精准化等需求，聚焦于社区治理各类可用数据资源，以社区共建共享共治为基本理念，以多元共治、网格化管理为基本方式，将大数据、物联网、云计算等前沿技术与中国智慧社区治理现实需求相结合，解决信息共享、资源统筹和有效协同的根本问题，实现对社区居民的精确管理，提高社区精细化治理能力，助力市域治理现代化。

社会治理中台通过标准地址命名规则，创建并分配对应建筑物的地址，从而关联社区内的房屋地址、居住人员信息等。实现社区综合治理、社区对应的建筑物聚合信息、以及社区网格边界标绘。提供社区的区域增加、编辑、启停用功能；分配区域所属建筑物聚合信息可根据地名模糊查询；可查看某个区域的关联网格员，实现新增、修改、注销等功能；通过汇聚数据接收情况查询、统计以及对接的社区运行监控等管理功能。可展示每个社区的人员进出数据、图像数据等情况，可查看每个设备的安装位置、情况、住户信息，提供对各类接收数据统计分析的功能。

中国专利“CN 106056519 A社会治理综合平台”提供的社会治理综合平台，包含服务器、与服务器通讯且佩戴于管理人员身上的记录装置和与服务器通讯且安装在监测点的摄像装置，能实时记录走访人员路线，获得观测地点的实时影像，但仅涉及智能网络管理设备领域，且没有对应用场景进行描述，无法对相关领域内需求痛点进行匹配。

发明内容

本发明的目的在于提供一种基于数据中台的社区综合治理的方法和系统，用于解决上述现有技术的问题。

本发明一种基于数据中台的社区综合治理的方法，其中，包括：利用基础设施进行数据采集；利用数据中台接收数据，对数据进行清洗包括检查数据一致性，处理无效值和缺失值，并存储在关系型数据库中；数据底板在数据库中提取地理位置信息数据在地图上进行标注；依据数据种类将数据存储在相应的主题库中；业务中台分为人员信息服务、地理管理与服务、数据智能服务、GIS服务以及智能应用服务；社区综合治理应用平台功能包括消防安全管理、特殊人群管理、街办及公安事务办理以及社区物业及生活服务，应用平台根据自身功能调取业务中台提供的共性服务。

根据本发明所述的基于数据中台的社区综合治理的方法的一实施例，其中，数据中台包括数据治理、数据存储、数据分析、数据共享交换、网格化数据底板以及数据资源池组件，为上层应用提供全面数据能力支撑。

根据本发明所述的基于数据中台的社区综合治理的方法的一实施例，其中，设计业务中台包括人员信息服务、地址管理与服务、数据智能服务、GIS服务以及智能应用服务组件，通过标准化接口为上层应用提供应用构建基础服务支撑。

根据本发明所述的基于数据中台的社区综合治理的方法的一实施例，其中，基础设施数据采集包括人员基本信息、地理位置信息、社区信息以及商铺信息。

根据本发明所述的基于数据中台的社区综合治理的方法的一实施例，其中，数据底板在数据库中提取人员、社区以及建筑物地理位置信息数据在地图上进行标注。

根据本发明所述的基于数据中台的社区综合治理的方法的一实施例，其中，依据数据种类将数据存储在相应的主题库中包括：法律法规已解决经验技巧数据存储在知识库中，人、地、事、物以及组织基础数据存储在基础库中，社区治理信息存储在主题库中。

根据本发明所述的基于数据中台的社区综合治理的方法的一实施例，其中，业务中台根据对应的服务分别从基础库、模型库、主题库以及知识库中调取数据包括：模型库中的重点人群特征以及主题库中的重点人员管控为特殊人群管理提供服务支撑，主题库中的矛盾纠纷调节以及知识库中的流程指南和经验技巧为社区物业及生活服务提供支撑。

本发明一种基于数据中台的社区综合治理的系统，其中，包括：数据采集层：负责底层数据采集、传输及交换，保证底层数据高效稳定可靠传输交换和数据同步，提供多源异构适配、ETL工具集、数据持久化缓存、交换规则自定义、关系型数据库数据采集、文件系统数据采集；支持Hadoop生态圈的数据采集汇聚，确保能够面向各种复杂的采集场景开展有效的数据采集工作；数据存储管理层：接入数据的数据存储，通过分布式存储组件，为数据提供异构数据的统一存储管理与检索查询，兼容HBase、各类关系型数据库以及外部存储支持；分析计算层：提供基础计算能力，支持实时计算框架、内存计算框架以及批处理计算框架，供大规模数量的分布式并行计算能力；数据访问层：为用户端提供访问服务，通过数据融合组件，提供统一元数据管理、逻辑数据库以及分布式查询引擎服务；统一运维管理层：提供统一运维管理支持，提供整个数据中台的系统运维、集群部署安装和软件包管理工作。

本发明一种基于数据中台的社区综合治理的系统和方法，提供重点场所巡查监管、人口管理、消防设施年检与维修管理、疫情等突发应急状况的有效管控，资源调度以及面向基层群众的服务事项实现线上沟通与办理等功能。

附图说明

图1是社会治理中台架构图；

图2是数据中台技术架构图；

图3是数据处理流程图。

具体实施方式

为使本发明的目的、内容、和优点更加清楚，下面结合附图和实施例，对本发明的具体实施方式作进一步详细描述。

图1是社会治理中台架构图，社会治理中台由基础设施层、社会治理中台层、应用平台层组成，各层之间相互衔接、协同工作。依据架构图，本发明提出的一种基于数据中台的社区综合治理的系统和方法包括下列步骤：

(1)利用基础设施进行数据采集,包括人员基本信息、地理位置信息、社区信息以及商铺信息等；

(2)利用数据中台接收数据，对数据进行清洗包括检查数据一致性，处理无效值和缺失值，并存储在关系型数据库中；

(3)数据底板在数据库中提取人员、社区、建筑物等地理位置信息数据在地图上进行标注；

(4)依据数据种类将数据存储在相应的主题库中，例如法律法规、经验技巧等数据存储在只是库中，人、地、事、物、组织等基础数据存储在基础库中，社区治理信息存储在主题库中；

(5)业务中台分为人员信息服务、地理管理与服务、数据智能服务、GIS服务以及智能应用服务，业务中台根据对应的服务分别从基础库、模型库、主题库、知识库中调取数据；

(6)社区综合治理应用平台功能包括消防安全管理、特殊人群管理、街办及公安事务办理、社区物业及生活服务等功能，应用平台即可根据自身功能调取业务中台提供的共性服务，例如模型库中的重点人群特征以及主题库中的重点人员管控为特殊人群管理提供服务支撑、主题库中的矛盾纠纷调节以及知识库中的流程指南和经验技巧为社区物业及生活服务提供支撑。

基础设施层是整个信息化建设的基础保障，依托数据中台台为上层社会治理中台、各应用平台的部署及运营提供所需的计算资源、存储资源、网络资源、安全防护能力等基础服务。

社会治理中台由数据中台和业务中台组成。其中，数据中台包括数据治理、数据存储、数据分析、数据共享交换、网格化数据底板、数据资源池等组件，可为上层应用提供全面数据能力支撑；业务中台包括人员信息服务、地址管理与服务、数据智能服务、GIS服务、智能应用服务等组件，通过标准化接口为上层应用提供应用构建基础服务支撑。

应用平台层由各类社会治理相关应用系统组成(应用系统以生态合作伙伴提供为主，亦可进行联合打造)，中台集成了各类应用系统的功能入口，可为重点人员管控、社区综合治理、矛盾纠纷调解等社会治理相关业务的开展提供信息化手段。

图2是数据中台技术架构图，技术构架依据功能架构设计，包含五个层次。采用多个组件的“松耦合”协同工作方式，兼容性好，实现了平台组件“可分可合”。便于挑选个别组件以及整体平台功能，规避大数据平台功能重复建设，资源浪费的问题。

具体包括：

数据采集层

主要是负责底层数据采集、传输及交换，保证底层数据高效稳定可靠传输交换和数据同步，提供多源异构适配、ETL工具集、数据持久化缓存、交换规则自定义、关系型数据库数据采集、文件系统数据采集等功能。另外，还支持Hadoop生态圈的数据采集汇聚，包括Zookeeper、Flume、Sqoop、kafka等，确保系统能够面向各种复杂的采集场景开展有效的数据采集工作，采集的数据包括人、地、事、物。

组织等数据

数据存储管理层

主要是接入数据的数据存储，主要通过分布式存储组件，为用户提供异构数据的统一存储管理与检索查询。另外还兼容HBase、各类关系型数据库以及外部存储支持。

分析计算层

主要负责提供基础计算能力，包括Impala、MapReduce、Spark、Storm等。支持实时计算框架、内存计算框架、批处理计算框架等分布式计算框架，为系统提供大规模数量的分布式并行计算能力。此外，算法模型主要提供数据计算和数据建模所需各种算法库的支持，并为用户提供相应的可视化套件，支持上层业务对数据分析方面的需要。

数据访问层

主要为用户端提供访问服务，通过数据融合组件，提供统一元数据管理、逻辑数据库、分布式查询引擎等服务。

统一运维管理层

主要为系统提供统一运维管理支持，提供整个数据中台的系统运维、集群部署安装和软件包管理等工作。

图3是数据处理流程图，数据采集、数据处理、数据提取全流程，数据采集是数据工厂的数据原材料获取过程，数据处理是数据工厂提供的数据处理流水线加工处理过程，数据提取是将数据原材料加工处理后交付给业务系统使用的过程。

数据产生

业务系统每天会产生大量结构化的数据，这些数据都存储在业务系统对应的数据库中。

数据采集

数据工厂将不同业务系统的数据同步到处理库中。

数据处理

可使用SQL、MR等程序对数据进行加工、分析、挖掘。

数据提取

可将分析处理过的结果数据导出至业务系统，供业务系统应用。

本发明采用B/S结构，其WEB浏览器是客户端最主要的应用软件。这种产品形态统一了客户端，将系统功能实现的核心部分集中到服务器上，简化了系统的开发、维护和使用。客户机上只要安装一个浏览器(Browser)，就能通过Web Server同数据库进行数据交互。

本发明中的中台提供数据同步工具、数据落图工具、网格划分工具等实现统一地址的标准化处理以及人口、法人、房屋等基础数据的进格的能力；提供数据资产管理、元数据管理以及数据质量评估等工具，并以元数据管理为基础进一步构建数据标准、数据血缘等扩展性功能，从而形成完整的数据中台数据管理体系。提供数据库交换、消息交换、跨域交换等功能可打通各领域、各部门之间的数据壁垒，实现对海量数据基于复杂规则的汇聚交换。

依据数据资源池，社会治理中台提供共性的人员信息、地址管理、数据智能、GIS以及智能应用等服务，为上层社区综合治理提供服务支撑。

采取自主可控的国产大数据平台，在需要高度安全和高度自主可控要求的领域，取代国外和开源软件产品，构建核心技术防火墙，在需要非结构化数据统一存储的领域，高效检索及智能管理分布式文件系统，构建海量存储管理系统，提供政府和企业在信息处理的安全保障；可兼容第三方系统和组件的分布式运行框架，可提供多种技术的融合使用和协同，例如商业数据库，开源大数据组件，公司的核心产品，以及客户自行开发的应用系统。

本发明主要针对社区存在的管理混乱、信息重复收集、数据资源分散等问题和智慧社区治安防控立体化、服务管控精准化等需求，聚焦于社区治理各类可用数据资源，以社区共建共享共治为基本理念，以多元共治、网格化管理为基本方式，将大数据、物联网、云计算等前沿技术与中国智慧社区治理现实需求相结合，解决信息共享、资源统筹和有效协同的根本问题，实现对社区居民的精确管理，提高社区精细化治理能力，助力市域治理现代化。

社会治理中台通过标准地址命名规则，创建并分配对应建筑物的地址，从而关联社区内的房屋地址、居住人员信息等。实现社区综合治理、社区对应的建筑物聚合信息、以及社区网格边界标绘。提供社区的区域增加、编辑、启停用功能；分配区域所属建筑物聚合信息可根据地名模糊查询；可查看某个区域的关联网格员，实现新增、修改、注销等功能；通过汇聚数据接收情况查询、统计以及对接的社区运行监控等管理功能。可展示每个社区的人员进出数据、图像数据等情况，可查看每个设备的安装位置、情况、住户信息，提供对各类接收数据统计分析的功能。

本发明包括数据资源池和业务资源池，前者打通数据孤岛，真正将数据融合共享，后者提供统一的云界面，用户操作更加灵活方便。基于深度学习的人员、车辆和物品智能分析算法，提供高效的视图内容自动化提取分析与识别解析的能力。能够实现对海量的视图信息进行实时结构化处理，使千亿级数据秒级处理成为可能。可将异构多云环境统一管理起来，统一进行任务的调度和分配。

以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明技术原理的前提下，还可以做出若干改进和变形，这些改进和变形也应视为本发明的保护范围。