首页> 中国专利> 备份文件的保留方法、装置、电子设备和存储介质

备份文件的保留方法、装置、电子设备和存储介质

摘要

本申请涉及备份文件的保留方法、装置、电子设备和存储介质,属于文件备份技术领域,所述方法包括:接收备份文件的保留指令,该保留指令携带保留时长信息和保留数量信息;根据保留时长信息和保留数量信息,生成数列,其中,该数列中的各个元素用于指示是否保留各日期的备份文件,且保留间隔日期的长短与距离当前日期的长短呈正相关;根据数列生成文件保留列表,并按照该文件保留列表进行备份文件的保留。能够在保证数据精度的同时,节约了存储资源。

著录项

  • 公开/公告号CN112559254A

    专利类型发明专利

  • 公开/公告日2021-03-26

    原文格式PDF

  • 申请/专利权人 杭州电魂网络科技股份有限公司;

    申请/专利号CN202011552760.5

  • 发明设计人 刘洋;

    申请日2020-12-24

  • 分类号G06F11/14(20060101);G06F3/06(20060101);

  • 代理机构33324 杭州创智卓英知识产权代理事务所(普通合伙);

  • 代理人张超

  • 地址 310051 浙江省杭州市滨江区西兴街道滨安路435号

  • 入库时间 2023-06-19 10:24:22

说明书

技术领域

本申请涉及文件备份技术领域,特别是涉及备份文件的保留方法、装置、电子设备和存储介质。

背景技术

在企业正常运营中,需要每天对关键数据进行备份,比如平台账号数据,充值数据,经分数据,游戏角色数据等。并且,备份数据通常需要经由网络传输进行异地存储保留。其中,游戏数据库较为庞大,每款游戏至少有一种数据库,企业每天会产生大量的备份文件。备份数据通常用来做故障修复或历史数据演练。对于这些大量文件的保留,通常采取以下方式:

(1)全部保留策略:按照项目要求,保留一定时间内全部数据;

(2)平均保留策略:按照项目需求,以固定频率保留数据。

根据上述方式,如果按照每天1TB备份量来算,保留3年的备份数据则需要1095TB异地存储空间。而现实中,企业运营所产生的数据远远高于上述数量。可见,传统的保留策略会造成存储资源的极大浪费。

而且,由于保留在异地的存储文件需要定期做完整性效验,以保证所有存储文件的可用性,所以保留的备份文件越多则效验成本越高。

因此,针对备份数据的保留,如何节约存储资源,成为本领域技术人员亟待解决的问题。

发明内容

本申请实施例提供了一种备份文件的保留方法、装置、电子设备和存储介质,以至少解决相关技术中针对备份数据的保留,如何节约存储资源的问题。

第一方面,本申请实施例提供了一种备份文件的保留方法,包括:接收备份文件的保留指令,该保留指令携带保留时长信息和保留数量信息;根据所述保留时长信息和所述保留数量信息,生成数列,其中,所述数列中的各个元素用于指示是否保留各日期的备份文件,且保留间隔日期的长短与距离当前日期的长短呈正相关;根据所述数列生成文件保留列表,并按照该文件保留列表进行所述备份文件的保留。

在其中一些实施例中,在所述的接收备份文件的保留指令之前,所述方法包括:根据业务重要性,对备份文件设置重要级别;根据所述重要级别,生成所述保留指令,其中,所述保留指令所携带的保留时长信息和保留数量信息与所述重要级别关联。

在其中一些实施例中,在所述的接收备份文件的保留指令之后,所述方法包括:根据文件MD5(Message-Digest Algorithm,信息摘要算法),查找损坏的文件,并删除损坏的文件。

在其中一些实施例中,在所述的接收备份文件的保留指令之后,所述方法包括:根据预设的过期规则查找过期文件,并删除过期文件。

在其中一些实施例中,根据所述数列生成文件保留列表包括:根据所述保留时长信息和所述保留数量信息,筛选出种子备份文件;将所述种子备份文件加入所述文件保留列表中。

第二方面,本申请实施例提供了一种备份文件的保留装置,包括:接收模块、生成模块和保留模块。接收模块用于接收备份文件的保留指令,该保留指令携带保留时长信息和保留数量信息;生成模块用于根据所述保留时长信息和所述保留数量信息,生成数列,其中,所述数列中的各个元素用于指示是否保留各日期的备份文件,且保留间隔日期的长短与距离当前日期的长短呈正相关;保留模块用于根据所述数列生成文件保留列表,并按照该文件保留列表进行所述备份文件的保留。

在其中一些实施例中,上述装置还包括设置模块,用于根据业务重要性,对备份文件设置重要级别;根据所述重要级别,生成所述保留指令,其中,所述保留指令所携带的保留时长信息和保留数量信息与所述重要级别关联。

在其中一些实施例中,上述装置还包括查找模块,用于根据文件MD5,查找损坏的文件,并删除损坏的文件。

第三方面,本申请实施例提供了一种电子设备,包括处理器和存储有计算机程序的存储介质,所述计算机程序被所述处理器执行时实现如上述任一项所述的备份文件的保留方法。

第四方面,本申请实施例提供了一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如上述任一项所述的备份文件的保留方法。

根据上述内容,本申请实施例的备份文件的保留方法包括:接收备份文件的保留指令,该保留指令携带保留时长信息和保留数量信息;根据保留时长信息和保留数量信息,生成数列,其中,该数列中的各个元素用于指示是否保留各日期的备份文件,且保留间隔日期的长短与距离当前日期的长短呈正相关;根据数列生成文件保留列表,并按照该文件保留列表进行备份文件的保留。通过本申请实施例,实现了距离当前时间越近,则保留间隔日期越短;距离当前时间越远,则保留间隔日期越长。从而,使得保留的备份数据具有以下特点:距离当前时间越近,保留的数据精度越高;距离当前时间越远,保留的数据精度越低。符合实际中对备份数据的使用情况:距离当前时间越近,使用频率越高;距离当前时间越远,使用频率越低。因此,能够在保障数据精度的同时,节约了存储资源。

附图说明

此处所说明的附图用来提供对本申请的进一步理解,构成本申请的一部分,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:

图1是根据本申请实施例的备份文件的保留方法的流程图;

图2是根据本申请实施例的数列的表达示意图;

图3是根据本申请实施例的保留策略的流程图;

图4是根据本申请实施例的相关代码示意图;

图5是根据本申请实施例的相关代码示意图;

图6是根据本申请实施例的备份文件的保留装置的结构框图;

图7是根据本申请实施例的电子设备的结构框图。

具体实施方式

为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行描述和说明。应当理解,此处所描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。基于本申请提供的实施例,本领域普通技术人员在没有作出创造性劳动的前提下所获得的所有其他实施例,都属于本申请保护的范围。

显而易见地,下面描述中的附图仅仅是本申请的一些示例或实施例,对于本领域的普通技术人员而言,在不付出创造性劳动的前提下,还可以根据这些附图将本申请应用于其他类似情景。此外,还可以理解的是,虽然这种开发过程中所作出的努力可能是复杂并且冗长的,然而对于与本申请公开的内容相关的本领域的普通技术人员而言,在本申请揭露的技术内容的基础上进行的一些设计,制造或者生产等变更只是常规的技术手段,不应当理解为本申请公开的内容不充分。

在本申请中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域普通技术人员显式地和隐式地理解的是,本申请所描述的实施例在不冲突的情况下,可以与其它实施例相结合。

除非另作定义,本申请所涉及的技术术语或者科学术语应当为本申请所属技术领域内具有一般技能的人士所理解的通常意义。本申请所涉及的“一”、“一个”、“一种”、“该”等类似词语并不表示数量限制,可表示单数或复数。本申请所涉及的术语“包括”、“包含”、“具有”以及它们任何变形,意图在于覆盖不排他的包含;例如包含了一系列步骤或模块(单元)的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可以还包括没有列出的步骤或单元,或可以还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。本申请所涉及的“连接”、“相连”、“耦接”等类似的词语并非限定于物理的或者机械的连接,而是可以包括电气的连接,不管是直接的还是间接的。本申请所涉及的“多个”是指两个或两个以上。“和/或”描述关联对象的关联关系,表示可以存在三种关系,例如,“A和/或B”可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。本申请所涉及的术语“第一”、“第二”、“第三”等仅仅是区别类似的对象,不代表针对对象的特定排序。

如上文所述,采用传统的全部保留策略会导致存储资源的极大浪费,同时,传统方式中还提供了平均保留策略:以固定频率保留数据,能够在一定程度上减少备份文件的保留数量。但是,在维护企业的正常运营中,备份数据起到至关重要的作用,特别是需要做故障修复的时候,若上述固定频率取值较大,会导致保留的备份数据精度低,从而造成故障修复不理想。所以,固定频率的取值通常较小,例如每两天保留一份,如此而来,则节约的资源十分有限。可见,保留数据的精度与存储资源的成本两者难以均衡。

因此,本申请实施例提供一种备份文件的保留方法,图1是根据本申请实施例的备份文件的保留方法的流程图,如图1所示,该方法包括:

S100:接收备份文件的保留指令,该保留指令携带保留时长信息和保留数量信息;

S200:根据保留时长信息和保留数量信息,生成数列,其中,该数列中的各个元素用于指示是否保留各日期的备份文件,且保留间隔日期的长短与距离当前日期的长短呈正相关;

S300:根据数列生成文件保留列表,并按照该文件保留列表进行备份文件的保留。

基于以上内容,使得保留的备份数据具有以下特点:距离当前时间越近,保留的数据精度越高;距离当前时间越远,保留的数据精度越低,从而与实际中备份数据的使用情况相契合:距离当前时间越近,使用频率越高;距离当前时间越远,使用频率越低。既满足了保留数据的精度要求又极大的节约了存储资源,解决了保留数据的精度与存储资源的成本两者难以均衡的问题。

为了更清楚的对本申请进行说明,以下对各个步骤进行详细的阐述。

步骤S100:接收备份文件的保留指令,该保留指令携带保留时长信息和保留数量信息。其中,可以根据业务重要性对备份文件设置重要级别,然后根据重要级别,人工输入或自动生成上述的保留指令,并且,该保留指令所携带的保留时长信息和/或保留数量信息与重要级别关联。例如,根据业务重要性,分别对平台账号数据、经分系统数据和游戏角色数据的保留做出以下设置:

平台账号数据:级别为一级,保留时长为3年,保留数量为600份备份;

经分系统数据:级别为二级,保留时长为5年,保留数量为300份备份;

游戏角色数据:级别为三级,保留时长为2年,保留数量为100份备份;

可见,越是重要的备份数据,保留数量就越多,同时,在某些业务场景下,保留时长也可以越长。

步骤S200:根据保留时长信息和保留数量信息,生成数列,其中,该数列中的各个元素用于指示是否保留各日期的备份文件,且保留间隔日期的长短与距离当前日期的长短呈正相关。上述数列可以作为本申请实施例的保留策略的表达方式。

作为一个示例,图2是根据本申请实施例的数列的表达示意图,如图2所示,数列演变:“1”表示保留备份数据,“0”表示不保留备份数据。需要说明的是,由于备份文件是历史产生的数据,故左边第一个数表示当前日期所对应的元素,横向往右依次为历史向远的日期所对应的元素。例如当前时间为12月23日,往右依次为12月22日,12月21日,12月20日……。而纵向的“第一天”、“第二天”……“第七天”表示模拟未来时间的保留策略。

请继续参阅图2所示,举例而言,某项目需要保留30天的10份备份文件,以第一行为例,该数列的元素包含“1”和“0”,总共有30个元素,每个元素对应于一个日期,其中,为“1”的元素有10个,即保留10份备份文件,并且,距离当前时间越远(即数列横向越往右),则连续不保留的时间就越长,即保留间隔日期就越长。

作为一个示例,图3是根据本申请实施例的保留策略的流程图,图4是根据本申请实施例的相关代码示意图。如图3所示,开始运行保存策略的流程,即,根据图4中的代码,将当前备份文件传入存储列表,然后根据文件MD5,查找损坏的文件,并将损坏的文件加入文件删除列表,从而删除损坏的文件。

可选的,还可以根据预设的过期规则查找过期文件,并删除过期文件,该过期规则包括:如果最大保留天数之外有备份文件,删除大于最大保留天数的备份文件;如果最大保留天数之外没有备份文件,保留最后一个备份。

图5是根据本申请实施例的相关代码示意图,如图5所示,在匹配保留策略时,可以根据保留时长和保留数量生成二维数组,每个数组对应一个开始日期和截止日期,可以根据该数组找到一个最老的完好的备份文件并标记保留,删除其他的备份文件。

然后,执行步骤S300:根据数列生成文件保留列表,并按照该文件保留列表进行备份文件的保留。

请继续参阅图3所示,每天对保留的备份文件进行完整性的校验。由于进行保留的存储文件总数量得到极大的降低,所以可以达到缩减异地存储管理成本的目的。

值得注意的是,本申请实施中,根据保留时长和保留数量来筛选出种子备份文件,并将种子备份文件加入文件保留列表中,以保证种子备份文件在日期的迭代中不会被删掉,该种子备份文件作为后续文件保存的基础。

综上,本申请实施例的备份文件的保留方法具有以下优势:

(1)降低备份成本:本申请实施例的保留策略贴合实际使用场景,并且能达到距离当前时间越远保留期限间隔越大的目标,从而节约了存储资源;

(2)降低异地存储管理成本:通过优化保留存储算法,降低保留备份文件的总数量,能够达到缩减异地存储管理成本的目的。

需要说明的是,在上述流程中或者附图的流程图中示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。

本实施例还提供了一种备份文件的保留装置,该装置用于实现上述实施例及优选实施方式,已经进行过说明的不再赘述。如以下所使用的术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。

图6是根据本申请实施例的备份文件的保留装置的结构框图,如图6所示,该装置包括接收模块1、生成模块2和保留模块3。接收模块1用于接收备份文件的保留指令,该保留指令携带保留时长信息和保留数量信息;生成模块2用于根据保留时长信息和保留数量信息,生成数列,其中,该数列中的各个元素用于指示是否保留各日期的备份文件,且保留间隔日期的长短与距离当前日期的长短呈正相关;保留模块3用于根据数列生成文件保留列表,并按照该文件保留列表进行备份文件的保留。

可选的,上述装置还包括设置模块,用于根据业务重要性,对备份文件设置重要级别;根据重要级别,生成保留指令,其中,保留指令所携带的保留时长信息和保留数量信息与重要级别关联。

可选的,上述装置还包括查找模块,用于根据文件MD5,查找损坏的文件,并删除损坏的文件。

需要说明的是,上述各个模块可以是功能模块也可以是程序模块,既可以通过软件来实现,也可以通过硬件来实现。对于通过硬件来实现的模块而言,上述各个模块可以位于同一处理器中;或者上述各个模块还可以按照任意组合的形式分别位于不同的处理器中。

图7是根据本申请实施例的电子设备的结构框图,如图7所示,该电子设备可以包括处理器81以及存储有计算机程序指令的存储器82。

具体地,上述处理器81可以包括中央处理器(CPU),或者特定集成电路(Application Specific Integrated Circuit,简称为ASIC),或者可以被配置成实施本申请实施例的一个或多个集成电路。

其中,存储器82可以包括用于数据或指令的大容量存储器。举例来说而非限制,存储器82可包括硬盘驱动器(Hard Disk Drive,简称为HDD)、软盘驱动器、固态驱动器(SolidState Drive,简称为SSD)、闪存、光盘、磁光盘、磁带或通用串行总线(Universal SerialBus,简称为USB)驱动器或者两个或更多个以上这些的组合。在合适的情况下,存储器82可包括可移除或不可移除(或固定)的介质。在合适的情况下,存储器82可在数据处理装置的内部或外部。在特定实施例中,存储器82是非易失性(Non-Volatile)存储器。在特定实施例中,存储器82包括只读存储器(Read-Only Memory,简称为ROM)和随机存取存储器(RandomAccess Memory,简称为RAM)。在合适的情况下,该ROM可以是掩模编程的ROM、可编程ROM(ProgrammableRead-Only Memory,简称为PROM)、可擦除PROM(Erasable ProgrammableRead-Only Memory,简称为EPROM)、电可擦除PROM(Electrically Erasable ProgrammableRead-Only Memory,简称为EEPROM)、电可改写ROM(Electrically Alterable Read-OnlyMemory,简称为EAROM)或闪存(FLASH)或者两个或更多个以上这些的组合。在合适的情况下,该RAM可以是静态随机存取存储器(Static Random-Access Memory,简称为SRAM)或动态随机存取存储器(Dynamic Random Access Memory,简称为DRAM),其中,DRAM可以是快速页模式动态随机存取存储器(Fast Page Mode Dynamic Random Access Memory,简称为FPMDRAM)、扩展数据输出动态随机存取存储器(Extended Date Out Dynamic RandomAccess Memory,简称为EDODRAM)、同步动态随机存取内存(Synchronous Dynamic Random-Access Memory,简称SDRAM)等。

存储器82可以用来存储或者缓存需要处理和/或通信使用的各种数据文件,以及处理器81所执行的可能的计算机程序指令。

处理器81通过读取并执行存储器82中存储的计算机程序指令,以实现上述实施例中的任意一种备份文件的保留方法。

在其中一些实施例中,电子设备还可包括通信接口83和总线80。其中,如图7所示,处理器81、存储器82、通信接口83通过总线80连接并完成相互间的通信。

通信接口83用于实现本申请实施例中各模块、装置、单元和/或设备之间的通信。通信端口83还可以实现与其他部件例如:外接设备、图像/数据采集设备、数据库、外部存储以及图像/数据处理工作站等之间进行数据通信。

总线80包括硬件、软件或两者,将电子设备的部件彼此耦接在一起。总线80包括但不限于以下至少之一:数据总线(Data Bus)、地址总线(Address Bus)、控制总线(ControlBus)、扩展总线(Expansion Bus)、局部总线(Local Bus)。举例来说而非限制,总线80可包括图形加速接口(Accelerated Graphics Port,简称为AGP)或其他图形总线、增强工业标准架构(Extended Industry Standard Architecture,简称为EISA)总线、前端总线(FrontSide Bus,简称为FSB)、超传输(Hyper Transport,简称为HT)互连、工业标准架构(Industry Standard Architecture,简称为ISA)总线、无线带宽(InfiniBand)互连、低引脚数(Low Pin Count,简称为LPC)总线、存储器总线、微信道架构(Micro ChannelArchitecture,简称为MCA)总线、外围组件互连(Peripheral Component Interconnect,简称为PCI)总线、PCI-Express(PCI-X)总线、串行高级技术附件(Serial AdvancedTechnology Attachment,简称为SATA)总线、视频电子标准协会局部(Video ElectronicsStandards Association Local Bus,简称为VLB)总线或其他合适的总线或者两个或更多个以上这些的组合。在合适的情况下,总线80可包括一个或多个总线。尽管本申请实施例描述和示出了特定的总线,但本申请考虑任何合适的总线或互连。

另外,结合上述实施例中的备份文件的保留方法,本申请实施例可提供一种计算机可读存储介质来实现。该计算机可读存储介质上存储有计算机程序指令;该计算机程序指令被处理器执行时实现上述实施例中的任意一种备份文件的保留方法。

以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。

以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。

去获取专利,查看全文>

相似文献

  • 专利
  • 中文文献
  • 外文文献
获取专利

客服邮箱:kefu@zhangqiaokeyan.com

京公网安备:11010802029741号 ICP备案号:京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有
  • 客服微信

  • 服务号