多源异构

摘要： 大数据和互联网时代,数字文化资源服务成为主流服务方式,用户对数字文化资源的知识服务水平也提出了新要求。在分析多源异构数字文化资源特征和聚合流程的基础上,构建了基于语义关联的多源异构数字文化资源聚合模型,同时对家谱文化资源服务平台进行了案例分析,以满足用户对数字文化资源个性化、智能化、知识化等的服务需求。

摘要： 随着无线通讯网络技术、传感器技术的飞速发展,智能手机作为一种高度普及的移动计算平台为人们提供了无可替代的便捷。高精度高可用的室内定位技术作为室内位置服务的基石,是打通室内外无缝位置服务的关键技术。论文在不改变、不增加智能手机硬件的前提下,围绕对音频定位、射频定位(Wi-Fi、BLE)、PDR定位算法的优化展开,提高单一的定位技术的精度和稳定性;搭建一个可接入多源异构量测的自适应的紧组合多源信号融合平台,主要研究内容如下:(1)提出了一种基于多传感器的智能手机握持姿势识别方法,基于101位测试人员的样本数据,提取多源传感器数据中隐含的运动模式以及环境信息特征,结合模式识别算法显著提高了识别精度。

摘要： 早期,旅游活动常被认为是日常生活的溢出,这导致旅游学科往往被置于社会科学的边缘[1]。近年来,随着“移动范式”的出现,旅游在社会活动中的重要性备受关注,旅游移动性也因此逐步成为旅游研究中的热门话题[2-3]。另外,作为近几十年来发展最为迅速的行业之一,旅游业在促进目的地经济和社会发展的同时,也带来一系列尖锐的问题和挑战。因此,对于旅游移动性的研究有助于理解游客行为。

摘要： 为克服公租房建设过程中面临的多方参与、工期紧张、地质信息共享不足等困难,提出建立地质数据统一标准、建立多方法统一建模流程、多源异构地质数据库、海量三维地质数据可视化等公租房工程地质信息集成管理系统设计方案。研发的系统在重庆龙洲湾公租房建设项目中的成功应用,表明该设计及系统具有良好的实用性,有效保障了工程建设安全。

摘要： 在地质研究不断深入和地理空间信息科学蓬勃发展的背景下,三维可视化地质建模技术已成为信息科学与地球科学交叉领域的研究热点。笔者对传统的三维地质建模方法进行研究、改进,形成一种新型的三维地质建模新方法。新型三维地质建模方法主要应用于地质领域,在多源异构地质数据融合、大规模高精度建模、地质网格细分、属性建模技术和遥感图像融合等方面取得了新的进展。笔者以成都—昌都区域为例,以地质钻孔数据、成都图幅、昌都图幅、遥感数据为数据源,利用新一代三维地质建模技术,进行了三维地质建模和可视化显示。成都—昌都区域的三维可视化验证了新型三维地质建模方法的可行性和有效性。同时也为全国重要地质钻孔数据服务平台对社会公开发布覆盖全国31个省(区、市),累计进尺达2.75亿m的110万个重要钻孔数据三维地质建模提供了重要方法。

摘要： 【目的】作物组学研究是农业作物科学发展的未来研究趋势,在数据密集型科学研究背景下,作物组学数据存在数据量大、来源多、结构复杂的特点,对多源异构作物组学数据的融合有利于优质作物种质资源的挖掘,助力农业科技发展。【方法】运用文献调查和网络数据收集法,对当前作物组学数据的分布和数据组织结构进行了分析,得出了多组学数据资源的主要特征;以高粱为例通过语义分析和文献查询方法,优化设计得到新的高粱多组学数据标准元数据,并开发脚本实现了不同数据库元数据到标准元数据的映射和转换,基于元数据实现了对多源数据的融合;通过整合mapping、变异分析、DEG计算等多种生物信息学方法,实现了对异构组学数据的融合。【结果】形成了高粱多源异构组学数据融合方法,能够实现对NCBI、EMBL、PlantGDB、国家农业科学数据中心等数据库中基因组、转录组、代谢组、表型组数据的融合。【局限】需进行数据源、标准元数据的针对性开发,以满足在其它作物中推广的实际需求。【结论】本文基于元数据和生物信息学方法,开发得到了作物多源异构组学数据的融合方法,具有普适性,可在其它作物品种中推广应用。

摘要： 为保证隧道施工多源异构设备数据的有效采集,针对施工群组装备运行数据特征,开展散布、异构设备数据的并行采集方案及技术研究;在先行构建出数据采集系统框架、采集实施流程的基础上,针对设备多维、连续数据生成的特点,开展基于流数据管理(stream-based date management, DSM)的技术方法探究;通过构建多并发数据采集(forward-oriented optimal concurrency control,FOCC)系统,实现多源异构数据的集采、并采。通过重点对前向乐观并发数据采集管理、采集设备自动组网技术方案进行研发实践,研发多协议集成、多接口并发采集、自组网、自主发送的"数据采集终端",成功实现了龙门吊、泥水分离系统等隧道施工装备运行数据的实时提取。研究证明,提出的多数据并采技术方案可有效解决多源异构数据采集问题。

摘要： 目前,山东省航空航天遥感影像数据获取途径不断拓展,遥感影像数据增长快速,预计“十四五”期间山东省遥感影像数据总量将达到PB级。面对数据量大、更新速度快、结构化与非结构化数据并存的大规模多源遥感影像数据,传统人工管理的方式效率低、易出错、耗费人力物力,不利于数据的共享、分发与应用,没有充分发挥影像数据的作用。因此,本文建设多源异构遥感影像管理系统,该系统通过建设数据归档子模块、数据整合子模块、系统管理子模块、数据统计分析子模块等,实现了多源异构遥感影像在线管理,助力了山东测绘信息化的发展。

摘要： 上海已探索出多种服务百姓的数字化应用,也应创造更多的数字化节能减排场景,让生态环境保护理念融入百姓日常生活。这个时代,跨域关联、多源异构的海量数据是参与人类发展和社会创新的第五要素,也是满足人们对美好生活向往的能量源泉。如何使其充分流通并合理利用,带动上海生活数字化应用场景融合创新,成为当下政府部门和学界亟待研究的课题。场景融合创新发挥空间大数据流通包括4种形式:一是数据共享;二是数据开放;三是数据授权运营;四是数据交易。

摘要： 调度工作是电网领域的核心业务之一,随着近年来电网信息系统建设,呈现出数据多元结构复杂的特点,为满足高效响应的调度需求,文章提出了一种基于迁移学习的电网领域实体识别技术,研究了基于知识图谱的电网故障处置应用。首先,提出了一种基于迁移学习的电网故障处置文本数据的实体识别技术,该技术可以在少量标注的情况下实现较高准确度的实体识别工作,有效地解决了电网领域小样本数据实体识别准确度较低的问题。其次,构建了电网故障处置知识图谱,该图谱将电网调度领域多源异构数据转化为知识,可实现对多故障类型的决策支撑。最后,基于所建立的电网故障处置知识图谱,实现了故障处置实时辅助决策功能,并嵌套进省地协同故障处置引擎应用中。实际应用表明,通过图数据库进行关系推理得到的知识经验,可为调度人员提供有效的故障处置参考方案。

摘要： 随着信息技术的发展,数据的结构类型越来越复杂,如何有效集成和利用多个来源中的异构数据是亟待解决的问题.数据集成技术即是将不同来源、格式、特点性质的异构数据在逻辑上或物理上有机地集中,从而实现数据的全面共享.Solr是一种开放源码的、基于Lucene Java的企业级搜索引擎,是数据集成的有效手段,可以集成多个异构数据来源.本文设计并实现了基于Solr的多源异构数据集成检索系统,能够为用户提供统一的查询视图,解决数据之间的异构性问题.

摘要： 现阶段,各单位独立建设的异构监控系统因为没有统一标准不能组成网络,存在重复建设和信息资源利用率低的问题.本文从分析现有的视频监控系统出发研究多源异构视频监控信息的整合技术,提出了一体化视频监控管理系统并分析了工作原理.

摘要： 本文根据房产数据与土地登记数据在不动产登记数据整合过程中数据之间的联系及映射关系,利用EPS不动产权籍调查生产系统,建立不动产登记数据库,形成统一的不动产权籍“一张图”,实现房屋、土地空间数据和登记业务数据、档案数据的一体化存储,以达到图、属、档一体化管理的应用目标.

摘要： Argo资料已成为当前海洋环境和气候变化研究最重要的数据来源.自2007年全球Argo实时海洋观测网建成以来,每年提供的Argo剖面数据稳定增长.面对覆盖范围不断拓展的观测网,以及观测要素的不断增加和剖面数据的海量上升,如何有效地对其进行组织管理和信息服务已经成为Argo数据共享进程中亟需解决的关键问题.本文根据Argo剖面数据的时空特点和信息服务需求,设计了一个适合多源异构Argo资料一体化管理的数据组织模型,提出了基于Flex RIA WebGIS技术的Argo资料共享与可视化平台构建方案,重点讨论了多源数据组织、地图切片与双缓存等关键技术,并展示了利用该平台查询和显示Argo浮标信息、漂移轨迹信息和剖面资料信息等的应用实例.结果表明,研发的Argo资料共享与可视化平台不仅为Flex RIA WebGIS的推广应用提供了一种新的思路,更为Argo资料用户提供了一个更加友好、功能更强的用户界面.

摘要： 测绘单位在长期数据生产中积累了大量成果数据。传统成果管理把成果数据以文件方式或者数据库方式存放在硬盘里，通过简单拷贝或下载提供给使用者。这种模式无法实现多源异构数据的综合使用，也不能进行有效精确的管理数据分发，而且分发出来的是原始数据也不能直接使用。本文具体介绍了怎样设计完成系统来实现多源异构数据的集成管理以及在此基础上形成的专题产品库管理，同时实现专题产品面向公众的发布，该系统目前也得到了广泛的应用，事实证明测绘专题产品库管理和发布系统能够解决测绘数据的数据量大、多源异构等问题，能够满足现代测绘成果管理的需要。

摘要： 大型工程是个典型非复杂系统，其对管理决策对信息的需求更为复杂。在分析大型工程信息源及管理决策特点的基础上，运用信息融合理论，对大型工程的多源异构信息进行有效的融合，初步建立原始级融合、特征级融合、决策级融合等应用框架，并介绍了其在工程造价中应用实例。

摘要： 本文首先由大数据和农业信息化的相关概念引出了农业大数据的概念;其次,介绍了目前农业大数据的发展现状,其中既有国内现状,也有国外现状;再次,讨论了农业大数据技术的关键技术,并进行了详细的介绍;最后,提出了农业大数据所面临的挑战和研究难题.

摘要： 本文首先由大数据和农业信息化的相关概念引出了农业大数据的概念;其次,介绍了目前农业大数据的发展现状,其中既有国内现状,也有国外现状;再次,讨论了农业大数据技术的关键技术,并进行了详细的介绍;最后,提出了农业大数据所面临的挑战和研究难题.

摘要： 本文首先由大数据和农业信息化的相关概念引出了农业大数据的概念;其次,介绍了目前农业大数据的发展现状,其中既有国内现状,也有国外现状;再次,讨论了农业大数据技术的关键技术,并进行了详细的介绍;最后,提出了农业大数据所面临的挑战和研究难题.

摘要： 本文首先由大数据和农业信息化的相关概念引出了农业大数据的概念;其次,介绍了目前农业大数据的发展现状,其中既有国内现状,也有国外现状;再次,讨论了农业大数据技术的关键技术,并进行了详细的介绍;最后,提出了农业大数据所面临的挑战和研究难题.

摘要： 本发明公开了一种面向异构多源大数据的异构多核并行处理装置及方法，该装置及方法采用Xilinx公司的ZYNQ‑7000SoC芯片实现，包括：基于FPGA的异构多源大数据并行采集模块，该模块将采集到的不同设备的数据以DMA的方式，并通过片内HP端口分别缓存在不同偏移地址和大小的片外DDR中；同时设计状态机将片外DDR挂载到片内AXI总线上。基于异构多核的数据并行处理模块，在该模块中搭建多个MicroBlaze核，并与ARM核组成异构多核架构；不同的MicroBlaze核负责处理不同的设备数据；ARM核完成对多个MicroBlaze核的性能监视，动态调度不同的数据处理算法在多个MicroBlaze核上的运行，以保证核的负载均衡。本发明能够实现制造现场不同设备大数据的高效并行处理，能有效支撑智能制造上层决策。

摘要： 本发明公开了一种面向异构多源大数据的异构多核并行处理装置及方法，该装置及方法采用Xilinx公司的ZYNQ‑7000SoC芯片实现，包括：基于FPGA的异构多源大数据并行采集模块，该模块将采集到的不同设备的数据以DMA的方式，并通过片内HP端口分别缓存在不同偏移地址和大小的片外DDR中；同时设计状态机将片外DDR挂载到片内AXI总线上。基于异构多核的数据并行处理模块，在该模块中搭建多个MicroBlaze核，并与ARM核组成异构多核架构；不同的MicroBlaze核负责处理不同的设备数据；ARM核完成对多个MicroBlaze核的性能监视，动态调度不同的数据处理算法在多个MicroBlaze核上的运行，以保证核的负载均衡。本发明能够实现制造现场不同设备大数据的高效并行处理，能有效支撑智能制造上层决策。

摘要： 本发明公开了一种多源异构试飞数据处理方法及多源异构试飞数据处理系统，涉及航空测试技术领域。所述多源异构试飞数据处理方法，利用预处理模块对数据源信息、数据库服务器信息及工程数据发送进行定义，并将定义后的数据发送至实时融合处理模块；实时融合处理模块接收无人机多路标准测控通信链路下传的数据包、机载测试系统采集遥测下传的PCM数据，并将接收的数据包与PCM数据融合处理后形成统一的融合数据包发送给监控终端。所述多源异构试飞数据处理系统用于实现上述多源异构试飞数据处理方法。本发明的优点是：可以同时处理多种通信链路格式数据和PCM数据，增强了系统灵活性和实时性，而且将数据处理部分完全通用化，降低了设备实现成本。

摘要： 本申请实施例提供了一种基于多源异构数据源的数据质量检测方法、装置、电子设备及存储介质，通过对多源异构数据进行字段识别，区分包含分组变量、时间日期变量以及不包含前述两种变量的数据指标，根据不同的数据类型自动选择合适的异常值检测算法，使得对多源异构数据源的数据治理无需如传统的数据治理方案一般严重依赖业务规则或者专家知识库，且对于异常值检验颗粒度更加精细，同时满足了复杂业务场景中的多源异构数据质量的检测要求。

摘要： 本发明公开了一种多源异构试飞数据处理方法及多源异构试飞数据处理系统，涉及航空测试技术领域。所述多源异构试飞数据处理方法，利用预处理模块对数据源信息、数据库服务器信息及工程数据发送进行定义，并将定义后的数据发送至实时融合处理模块；实时融合处理模块接收无人机多路标准测控通信链路下传的数据包、机载测试系统采集遥测下传的PCM数据，并将接收的数据包与PCM数据融合处理后形成统一的融合数据包发送给监控终端。所述多源异构试飞数据处理系统用于实现上述多源异构试飞数据处理方法。本发明的优点是：可以同时处理多种通信链路格式数据和PCM数据，增强了系统灵活性和实时性，而且将数据处理部分完全通用化，降低了设备实现成本。

摘要： 本发明提出了一种解决数据语义异构问题的多源异构数据库数据集成方法，包括：采集来自企业的多个数据源，每个所述数据源包含的表格、属性、语义均不同，将上述多个数据源采用模式对齐方式进行处理，以确定具有相同语义的属性和具有不同语义的属性；对已经模式对齐的数据，记录数据的链接，以确定指向相同实体的链接和指向不同实体的链接；采用数据融合方式查询出反应企业真实情况的真实值。本发明解决语义歧义、实例表示歧义、数据不一致性等问题。

摘要： 本发明公开一种多源异构数据源与图数据库导入导出的方法及装置，其中，该方法包括：读取各种类型存储的数据源，并进行数据关联，生成一个统一列格式的分布式数据集；对统一列格式的分布式数据集进行转换处理后，生成一个新的统一列格式的分布式数据集；从新的统一列格式的分布式数据集中提取图数据库的点和边的信息，分别写入图数据库的顶点和边；读取图数据库，将图数据库的顶点和边进行转换，并将顶点和边的数据进行关联，生成一个统一列格式的分布式数据集，进行后续的转换处理后，将数据写入目标存储。该方法及装置解决了目前基于工具的数据导入/导出时的技术问题。

摘要： 本发明公开了一种面向多源异构数据源的接口系统、通用接口及其实现方法，以面向多源异构数据源的通用接口实现方法为基础，包括：新建一个工程，并在工程内建立一个通用接口；在通用接口中建立相互独立的数据集合和操作集合；其中，数据集合被定义为能够被具体数据类型继承，且包括数据基类和继承数据基类的二级数据类；操作集合包括操作基类和继承操作基类的二级操作类；且所述的二级操作类被定义有其适用的具体数据类型以实现数据集合与操作集合的解耦与正交。通用接口中数据和操作形成两个独立的集合，并将操作抽象为接口，实现数据与操作的解耦和正交，使数据和操作能够自由地组合，实现操作的复用。

摘要： 本申请实施例提供了一种基于多源异构数据源的数据质量检测方法、装置、电子设备及存储介质，通过对多源异构数据进行字段识别，区分包含分组变量、时间日期变量以及不包含前述两种变量的数据指标，根据不同的数据类型自动选择合适的异常值检测算法，使得对多源异构数据源的数据治理无需如传统的数据治理方案一般严重依赖业务规则或者专家知识库，且对于异常值检验颗粒度更加精细，同时满足了复杂业务场景中的多源异构数据质量的检测要求。

摘要： 本发明涉及图数据库图存储技术领域，提供一种多源异构数据源导入Janusgraph图数据库的方法和装置，本发明的方法，包括：获取待导入数据的数据源类型，通过匹配获取所述数据源的Datax的读插件；根据待导入数据的数据量，计算Datax的读插件的并行读通道数量，将数据分批次读入读通道内；扩展Datax的写插件，初始化写通道并将初始化的写通道与读通道匹配，将读通道中的数据持续获取至对应的写通道；对写插件的写通道中的数据进行数据去重校验，将通过去重校验的数据写入图数据库。根据本发明示例性实施例的多源异构数据源导入Janusgraph图数据库的方法和装置，可以适配多种异构数据源的数据，实现数据的快速导入。