数据生命周期

摘要： [研究目的]随着学科间的交叉融合愈发普遍,交叉学科代表着科学领域朝向综合性发展的趋势,因此探析交叉学科中现有的科学数据管理政策进而明确相关管理内容,对指导该领域的科学数据管理活动具有重要的指导意义。[研究方法]以地理学这一典型的交叉学科为例,通过网络调研,选取中、英、美、澳四个国家地理学科领域的25份科学数据管理政策,采用内容分析法对政策文本进行了详细分析,以便揭示适用于交叉学科领域的科学数据管理内容。[研究结论]基于科学数据生命周期理论,构建了相对完善的科学数据管理政策内容框架来指导交叉学科的科学数据管理活动;此外,对科学数据管理流程中的重要环节提出了建议,包括宏观政策制定、数据管理计划、数据创建与收集、元数据选择与使用、数据的分类管理、人员培训和权责划分。

摘要： 我国个人信息保护立法以“可识别性”为标准划分个人信息保护范围。因该标准的自身缺陷,各国在数字化环境的实践中遇到不同的适用困境。功能性匿名将信息保护传统的一元标准转化为风险控制,从而极好地满足了信息利用与信息保护的双向需求。我国宜分整体架构与细节流程调整两步走,以递进的方式引入功能性匿名方法。对功能性匿名运行的评价可抽取外部约束与内部治理二阶层的五个指标,并从数据生命周期的角度应用该评价系统。

摘要： 金融业机构在境内经营管理过程中沉淀了海量数据,这些金融数据的跨境传播在满足商业、监管等需求的同时,对个人权益、国家安全、公共利益造成了威胁。当前亟须超越原有规则文件的管制思维,在深入分析行为构成要件的基础上,厘清金融数据出境行为"合法"与"违法"界限,向社会主体提供规范性指引,从而实现数据流动与数据安全的恰当平衡。建议按照出境内容、出境目的、出境手段的顺序,依次识别每项构成要件具体类型的安全风险,进而将金融数据出境行为区分为当然合法、附条件合法、违法三种情况,形成层次化、可操作的行为合法性认定路径。

摘要： 数据流动有多种视角,在传统安全的体系里,往往用数据生命周期阶段如采集、存储、传输、使用来描述数据流动,在《数据安全法》里定义了一个新的概念叫“数据处理活动”,提出“数据处理,包括数据的收集、存储、使用、加工、传输、提供、公开等”,采用了数据生命周期阶段再加上一个等字,而国外数据安全对数据处理活动的定义,更偏向业务活动的定义,例如把“征信报告查询”视为一个数据处理活动。

摘要： 文化遗产蕴含丰富的文化底蕴与历史传承价值。挖掘爱尔兰数字存储库在技术框架、协同合作、多元服务与安全体系方面的实践亮点和实践经验,探讨我国构建文化遗产资源存储库的策略,希冀为我国文化遗产资源保护工作的可持续发展提供指导。

摘要： 当前数字政府治理存在着协同治理、绩效监管、开放共享和数据安全等困局。网络化治理理论、绩效治理理论及数据生命周期理论为破解数字政府治理困局提供了理论基础。阐释数字政府治理、区块链及治理理论之间的逻辑关系,构建区块链赋能的数字政府治理框架,提出区块链赋能的数字政府治理路径:多元主体共享信息的协同治理、科学量化监管考核的溯源治理、运行过程公开透明的开放治理、化解数据信息风险的安全治理,推动政府真正走向治理现代化的转型之路。

摘要： 大数据时代,数据的价值凸显,数据素养日益受到国家和相关专家学者的重视。文章在调查了高校教师数据素养的基础上,分析了高校教师在数据素养方面存在的问题及造成这些问题的原因,有针对性地提出了数据素养教育内容和培养策略,旨在实施差异化、精准化的数据素养培育和提升工程,推动高校的创新型人才培养和“双一流”建设。

摘要： 新文科实验室面临的最大困境是如何在有限的资源环境中搭乘新机遇的快车实现新突破新发展。该文将新文科实验室作为综合性平台,契合数据生命周期与新文科实验室内涵,提出数据导向的新文科实验室模式。该模式突出数据采集丰富社会实践、数据管理融合技术学习、数据分析促进学术研究、数据存储实现资源共享、数据发布提升智库服务的特点,而且具有平衡投入与产出、激发数据价值、兼顾社会实践与实验室实践、促进政产学研协同育人的意义。

摘要： 对任何一个科研活动主体而言,如何汇集、存储、共享、开发和利用科学数据,基于数据构建开放协同的科研组织模式,已成为迎接数据密集型科学范式到来所面临的现实挑战。与大学和企业相比,科研机构具有开展科学数据管理的组织优势,有条件做出先行探索。本文尝试以美国国立卫生研究院和法国国家科学研究中心的科学数据管理工作为对象,采用案例分析和对比分析的研究方法,剖析二者围绕数据生命周期建立的数据管理体系特征,以期为我国科研机构建构数据管理体系提供借鉴。

摘要： 教育数据是推进教育信息化实践的重要动力,其伦理问题的规约是确保教育数据健康发展的关键。通过对教育数据伦理概念与研究现状的审视,研究发现显著缺乏数据生命周期视角下的教育数据伦理问题诠释,并且缺少特定场域的教育数据伦理问题审思。为此,该文聚焦于课堂教学场域下的教育数据,通过对比分析典型数据生命周期模型,从教育数据收集、处理、储存、管理、分析与应用六个阶段分别映射隐存的问题及风险,详细剖析各阶段教育数据伦理问题。最后,从技术设计内嵌、伦理观建构、问责机制形成、协同伦理共治方面提出抑制伦理问题的规约之径,为教育数据伦理研究提供参考。

摘要： 本文提出数据工程的概念,并通过初步研究,进一步提出了数据处理过程中的数据生命周期以及数据活动的概念.数据工程以数据作为研究对象,主要研究数据生命周期中数据的组织、采集、管理、深加工等相关活动,并归纳总结出数据活动的基本特征和相关特性.通过数据工程的研究,可以推动数据处理过程的规范化,有效地利用数据资源.

摘要： 本发明公开了一种数据标签全生命周期管理的标准数据管理平台，包括数据录入系统、服务器、标签数据库、标签标记系统；数据录入系统用于数据的收集、整理、录入；服务器与数据录入系统之间信号连接，服务器用于存储记录数据录入系统录入的数据；标签数据库将数据归纳分类成不同类别，并在不同类别数据中提取特征数据，最后为每一项特征数据分配对应的标签；标签标记系统分别与标签数据库和服务器之间信号连接，标签数据库获取服务器中的数据并与标签数据库中的特征数据进行比对，若数据中存在符合对比的特征数据，则为该数据打上对比特征数据所对应的标签；数据录入后能够自动依据数据特征为其打上标签，有利于数据的管理。

摘要： 本发明公开了一种基于数据湖的全生命周期数据销毁方法，建立数据湖，并将数据存储至数据湖中；在数据存入数据湖时，在内存或新增的数据文件中添加删除标记；所述销毁方法包括如下步骤：步骤1：在终端上发送用户注销或者销毁数据的命令，并启动数据删除任务；步骤2：查询元数据，在数据湖中查询待删除的数据；步骤3：根据数据文件中的删除标记对待删除的数据进行删除清理；步骤4：记录删除任务执行的信息，并生成对应的删除日志。本发明充分利用了数据湖高速upsert的特性，能够正常实现指定结构化、半结构化、非结构化数据删除操作；能够快速实现对于标记个体实例的相关全生命周期数据删除。

摘要： 本发明公开了一种基于数据中台的自动扶梯全生命周期数据管理方法及系统，其通过获取自动扶梯全生命周期过程中的参数数据；对上传的参数数据进行筛选分类；依据筛选分类的结果，对筛选后的数据进行审查、清洗、转换和验证后再存储；利用人机交互生成应用需求指令，依据应用需求指令调用关联数据，并建立对应的数学模型进行计算处理；接收分析结果，并依据分析结果制定相应的投资预算策略、设计方案策略、紧急预案策略和维保计划策略，能够有效提高信息处理效率，实现自动扶梯全生命周期信息无障碍交流，减少了因沟通不畅导致各类问题发生的可能。

摘要： 本申请是关于一种产品全生命周期评价的数据收集方法及数据收集系统。其中，产品全生命周期评价的数据收集方法包括：确定产品全生命周期评价的评价范围和系统边界；采集产品部件的原料数据；设置产品部件的原料与全生命周期评价数据库中原料的对应规则，将产品部件的原料与全生命周期评价数据库中的原料相匹配，形成与全生命周期评价基础过程原料相关联的产品原料数据，并保存至第一数据库；采集产品的生产数据、运输过程数据、使用过程数据和回收与废弃过程数据；将采集的数据导入全生命周期评价系统。本申请提供的方案，能够实现产品数据调研的标准化和数据导入的自动化，降低了离散型产品进行全生命周期评价的难度，并保证了评价结果的可比性。

摘要： 本实用新型公开了一种地面智能生命周期管理器及水井智能生命周期管理系统,该地面智能生命周期管理器，包括来水管线、调节阀、执行器、数据处理模块、注入管线、流量自控模块，垂直设置的所述来水管线与水平设置的注入管线之间设置调节阀，所述调节阀的上部设置执行器用于控制调节阀的状态，所述流量自控模块分别设置在来水管线、调节阀、注入管线上，所述数据处理模块位于执行器一侧并且与执行器、流量自控模块连接，所述数据处理模块与井下的智能分注仪连接。本实用新型能够全自动的对每个地层注入流量实现实时监测与控制，数据分析，并实时监测井下仪器各电参数的运行状态，定期对井下流量、压力进行标定校准。

摘要： 本发明公开了一种支持多数据库引擎的数据生命周期管理的实现方法，所述方法包括：通过Hive MetaStore服务，创建具有生命周期的依赖Hive元数据的Hive表、HBase表和ElasticSearch表；HBase、ElasticSearch集群对SSD盘和HDD盘进行存储；定期调用生命周期管理服务，读取Hive MetaStore服务中表元数据的生命周期信息和分区信息，计算是否存在过期的分区数据，如果存在，根据表元数据信息判断表的类型，依据不同表数据存储类型，调用相应的数据生命周期管理服务，根据表元数据中规则，自动对过期的数据进行删除或迁移。

摘要： 本申请公开了一种基于Oracle数据库对特大表数据生命周期的管理方法，其中方法包括：创建当前特大表、历史特大表以及周期控制表；根据所述周期控制表获取保留周期；结合所述保留周期与分区交换技术将当前特大表的数据存入所述历史特大表；将所述历史特大表进行分区压缩获取压缩数据。本发明通过将当前特大表的数据通过分区交换技术将数据存入历史特大表，使得当前特大表数据量的相对稳定，进而保证系统的稳定，进一步的对历史特大表进行压缩提高了存储的使用率，且可以根据周期控制表快速的选择查询路径提高查询效率。

摘要： 本发明公开了一种大数据仓库数据生命周期治理的方法，属于数据处理技术领域。本发明中，通过对分布式文件系统元数据进行实时解析、过滤、分片、并行解析，使得解析效率提升，通过一套自动化流程的建设，完成数据安全下线的整个过程，对业务的影响最小化，支持回滚操作，针对大规模海量数据的集群，可以快速在分钟级别审计出文件的访问信息，及时发现冷热数据、僵尸数据，通过数据生命周期治理系统可以协助企业全面掌控数据资产现状、提升数据质量、降低无效数据存储成本，为企业数据治理提供有效决策信息。

摘要： 本发明公开了一种基于机载嵌入式数据库的数据生命周期管理方法，其步骤包括：1)在事务开启前，在所选数据库表的数据库表结构体中设置数据最长存储时间、数据最大存储条数的属性值，并在数据库表结构体内添加隐藏字段TTL_clock_time@和TTL_count@；TTL_clock_time@用于标识基于时间戳的TTL机制，TTL_count@用于标识基于记录条数的TTL机制；2)在事务开启后，检查事务所操作的数据库表的数据库表结构体信息中是否存在所述隐藏字段，如果存在则对所操作数据添加对应TTL标识；3)在事务提交的第一阶段基于记录条数的TTL机制和基于时间戳的TTL机制对数据进行操作。

摘要： 本发明提供了一种基于数据血缘图谱的数据生命周期管理方法和系统，包括：步骤1：解析数据加工记录，获取数据上下游关系；步骤2：根据数据上下游关系，构建数据血缘图；步骤3：建立数据访问权限信息记录表，包括用户、数据、权限信息、权限状态和有效期字段；步骤4：新增数据使用权限，将相关信息自动记录在数据访问权限信息记录表中，权限状态标记为生效。本发明通过知识存储模块将脚本解析的关系及知识融合后的实体储存于图数据库中，以图的方式展示和存储数据血缘，在后续权限回收的时候提供某一个直接授权数据的所有派生演化子集，便于精准进行管控。