分布式存储系统中的磁盘管理方法和设备

摘要

本发明公开了一种分布式存储系统中的磁盘管理方法和设备，其中，所述分布式存储系统中包含多个组成主盘环的磁盘，所述多个磁盘中存储目标数据，该方法包括：将目标数据分为冷数据和热数据；根据所述冷数据和热数据所在的磁盘位置，将所述主盘环中的部分磁盘形成冷数据盘环，所述主盘环中的其余磁盘形成热数据盘环；将不在冷数据盘环的冷数据迁移到冷数据盘环的磁盘中，并将不在热数据盘环的热数据迁移到热数据盘环的磁盘中；以及降低所述冷数据盘环中磁盘的转速。该方法和设备能够降低分布式存储系统的能耗。

说明书

技术领域

本发明涉及存储技术，更具体地，涉及一种分布式存储系统中的磁盘管理方法 和设备。

背景技术

目前广泛使用的目标存储技术在云技术领域、社交网络以及移动互联网领 域产生了大量的利用商业磁盘的应用，有些应用每天都产生上亿数量的图片。 同时，企业也正逐步采用相同的商业磁盘来存储关键数据，诸如扫描图像、视 频、音频记录等等。商业磁盘比起传统的高性能磁盘更容易发生问题，为了防 止由于磁盘失效造成的数据丢失，通常使用目标数据复制来在不同的磁盘存储 多份拷贝，这些不同的磁盘通常物理上位于不同的节点、不同的存储支架、甚 至不同的地方。为了达到高效率和高可用性，目前使用越来越多的商业磁盘以 及高度分布式的方式存储数据及其拷贝。

但是磁盘的消耗的增加，在互联网公司已经产生了很严重的电源消耗问题， 当应用要求磁盘上的全部目标数据，无论其是否在正在旋转的磁盘上，还是在 几年才访问一次的磁盘上，都保持快速访问并且较长时间保留时，这个问题就 成为一个特别的挑战。

发明内容

本发明提出了一种使用商业磁盘但是减少电源消耗的分布式存储系统中的 磁盘管理方法和设备。

根据本发明的一个方面，提供了一种分布式存储系统中的磁盘管理方法， 其中，所述分布式存储系统中包含多个组成主盘环的磁盘，所述多个磁盘中存 储目标数据，该方法包括：

将目标数据分为冷数据和热数据；

根据所述冷数据和热数据所在的磁盘位置，将所述主盘环中的部分磁盘形 成冷数据盘环，所述主盘环中的其余磁盘形成热数据盘环；

将不在所述冷数据盘环的冷数据迁移到所述冷数据盘环的磁盘中，并将不 在所述热数据盘环的热数据迁移到所述热数据盘环的磁盘中；以及

降低所述冷数据盘环中磁盘的转速。

根据本发明的另一个方面，提供了一种分布式存储系统中的磁盘管理设备， 其中，所述分布式存储系统中包含多个组成主盘环的磁盘，所述多个磁盘中存 储目标数据，该设备包括：

划分装置，被配置为将目标数据分为冷数据和热数据；

分组装置，被配置为根据所述冷数据和热数据所在的磁盘位置，将所述主 盘环中的部分磁盘形成冷数据盘环，所述主盘环中的其余磁盘形成热数据盘环；

第一迁移装置，被配置为将不在所述冷数据盘环的冷数据迁移到所述冷数 据盘环的磁盘中，并将不在所述热数据盘环的热数据迁移到所述热数据盘环的 磁盘中；以及

降速装置，被配置为降低所述冷数据盘环中磁盘的转速。

附说图明

通过结合附图对本公开示例性实施方式进行更详细的描述，本公开的上述以 及其它目的、特征和优势将变得更加明显，其中，在本公开示例性实施方式中， 相同的参考标号通常代表相同部件。

图1示出了适于用来实现本发明实施方式的示例性计算机系统/服务器12的 框图；

图2示出了现有的一个区域的分布式存储结构；

图3示出了根据本发明一种实施方式的一种分布式存储系统中的磁盘管理 方法的流程；

图4示出图2所示的一个区域的分布式存储结构形成的两个区域的分布式存 储结构；以及

图5示出了根据本发明一种实施方式的分布式存储系统中的磁盘管理设备 的结构框图。

具体实施方式

下面将参照附图更详细地描述本公开的优选实施方式。虽然附图中显示了 本公开的优选实施方式，然而应该理解，可以以各种形式实现本公开而不应被 这里阐述的实施方式所限制。相反，提供这些实施方式是为了使本公开更加透 彻和完整，并且能够将本公开的范围完整地传达给本领域的技术人员。

图1示出了适于用来实现本发明实施方式的示例性计算机系统/服务器12的 框图。图1显示的计算机系统/服务器12仅仅是一个示例，不应对本发明实施 例的功能和使用范围带来任何限制。

如图1所示，计算机系统/服务器12以通用计算设备的形式表现。计算机系 统/服务器12的组件可以包括但不限于：一个或者多个处理器或者处理单元16， 系统存储器28，连接不同系统组件(包括系统存储器28和处理单元16)的总 线18。

总线18表示几类总线结构中的一种或多种，包括存储器总线或者存储器控 制器，外围总线，图形加速端口，处理器或者使用多种总线结构中的任意总线 结构的局域总线。举例来说，这些体系结构包括但不限于工业标准体系结构 (ISA)总线，微通道体系结构(MAC)总线，增强型ISA总线、视频电子标 准协会(VESA)局域总线以及外围组件互连(PCI)总线。

计算机系统/服务器12典型地包括多种计算机系统可读介质。这些介质可以 是任何能够被计算机系统/服务器12访问的可用介质，包括易失性和非易失性 介质，可移动的和不可移动的介质。

系统存储器28可以包括易失性存储器形式的计算机系统可读介质，例如随 机存取存储器(RAM)30和/或高速缓存存储器32。计算机系统/服务器12可 以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。 仅作为举例，存储系统34可以用于读写不可移动的、非易失性磁介质(图1 未显示，通常称为“硬盘驱动器”)。尽管图1中未示出，可以提供用于对可移 动非易失性磁盘(例如“软盘”)读写的磁盘驱动器，以及对可移动非易失性光 盘(例如CD-ROM,DVD-ROM或者其它光介质)读写的光盘驱动器。在这些 情况下，每个驱动器可以通过一个或者多个数据介质接口与总线18相连。存储 器28可以包括至少一个程序产品，该程序产品具有一组(例如至少一个)程序 模块，这些程序模块被配置以执行本发明各实施例的功能。

具有一组(至少一个)程序模块42的程序/实用工具40，可以存储在例如存 储器28中，这样的程序模块42包括——但不限于——操作系统、一个或者多 个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中 可能包括网络环境的实现。程序模块42通常执行本发明所描述的实施例中的功 能和/或方法。

计算机系统/服务器12也可以与一个或多个外部设备14(例如键盘、指向设 备、显示器24等)通信，还可与一个或者多个使得用户能与该计算机系统/服 务器12交互的设备通信，和/或与使得该计算机系统/服务器12能与一个或多个 其它计算设备进行通信的任何设备(例如网卡，调制解调器等等)通信。这种 通信可以通过输入/输出(I/O)接口22进行。并且，计算机系统/服务器12还 可以通过网络适配器20与一个或者多个网络(例如局域网(LAN)，广域网 (WAN)和/或公共网络，例如因特网)通信。如图所示，网络适配器20通过 总线18与计算机系统/服务器12的其它模块通信。应当明白，尽管图中未示出， 可以结合计算机系统/服务器12使用其它硬件和/或软件模块，包括但不限于： 微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带 驱动器以及数据备份存储系统等。

现有的目标存储技术采用分布式存储结构。图2示出了现有的一个区域的分 布式存储结构。图2中，M个存储节点将各自的目标数据分别存储到N个磁盘， N个磁盘组成主盘环(MainDiskRing)。这里盘环并非图论中环的概念，而是 本领域技术人员常用的分布式存储系统中的一个逻辑概念，指存储系统中的一 些磁盘形成了一个逻辑上的组，从而存储系统可以把目标数据的存放位置按照 一定规则映射到了这组磁盘的各个位置上。

存储系统中，有些数据是被频繁访问的，这里称为热数据；而有些数据访问 频率非常低，这里称为冷数据。热数据和冷数据混合地存储在组成主盘环的N 个磁盘中，这N个磁盘采用相同的磁盘转速。磁盘一般都可以设置多个转速。 磁盘的转速越快，寻找文件的速度也就越快，磁盘的传输速度也就越高。但是， 磁盘转速高对商业磁盘也带来了许多负面效应，例如温度升高；电机主轴磨损 加大，使得磁盘使用寿命变短；电机的功耗增大，单位时间内消耗的电能多， 等等。磁盘的转速一般可以通过一定的指令接口进行控制，所以本发明考虑可 以根据需求动态调整磁盘转速从而降低系统对能源的消耗。

因此，本发明的基本思想是：将冷数据和热数据分离，使用不同的盘环存储， 对不同的盘环内的磁盘设置不同的磁盘转速，从而在不降低系统的效率和可用 性的情况下，减少整个存储系统能量的消耗，进一步提高整个存储系统的寿命。

根据本发明的一种实施方式，公开了一种分布式存储系统中的磁盘管理方 法。图3示出了根据本发明一种实施方式的一种分布式存储系统中的磁盘管理 方法的流程，其中，所述分布式存储系统中包含多个组成主盘环的磁盘，所述 多个磁盘中存储目标数据，根据图3，该方法包括：

在步骤S301，将目标数据分为冷数据和热数据；

在步骤S302，根据所述冷数据和热数据所在的磁盘位置，将所述主盘环中 的部分磁盘形成冷数据盘环，所述主盘环中的其余磁盘形成热数据盘环；

在步骤S303，将不在所述冷数据盘环的冷数据迁移到所述冷数据盘环的磁 盘中，并将不在所述热数据盘环的热数据迁移到所述热数据盘环的磁盘中；

在步骤S304，降低所述冷数据盘环中磁盘的转速。

针对图2所示的一个区域的分布式存储结构，使用图3所示的方法后，会形 成如图4所示的两个区域的分布式存储结构，两个区域分别为热数据盘环和冷 数据盘环。图4的磁盘标号与图2的磁盘标号之间可能是相同的，也可能是不 同的，但是图4的冷热数据盘环中磁盘总个数与图2的主盘环中磁盘总个数相 同。

在步骤S301的一种实施方式中，用户可以手工指定哪些目标数据是热数据， 那些目标数据是数据。这种方式尤其适用于目标数据的类型比较少，但是每种 类型的目标数据量较大的情况。用户手工一次指定就无需复杂的判定算法，节 省能源。

在步骤S301的另一种实施方式中，可以使用目标数据的I/O操作次数判别 该目标数据是冷数据还是热数据。一种具体的实施方式中，包括两个步骤：在 步骤1，在设定的周期内，记录每个目标数据的I/O操作次数；在步骤2，根据 设定的冷热数据条件，判定每个目标数据是冷数据还是热数据。这里，设定的 周期可以由用户根据实际情况设定，也可以是系统管理员根据经验来设定，例 如可以是几天，几周，甚至几个月，几年等等。设定的冷热数据条件可以是在 设定的周期内，I/O操作总次数小于设定的第一阈值的目标数据为冷数据，否则 为热数据；或者设定为在设定的周期内，I/O操作每天的平均次数小于设定的第 一阈值的目标数据为冷数据，否则为热数据。这里的第一阈值也可以根据实际 目标数据的情况来设定。每个目标数据的I/O操作可以直接记录I/O操作，然 后到设定的周期再统计次数，例如对每次I/O操作，记录I/O操作时间、目标 数据的编号以及那种I/O操作(包括读操作和写操作)；也可以不记录具体的I/O 操作，而只在每个目标数据I/O操作发生时使用该目标数据的计数器进行计数， 到设定的周期时，将每个目标数据的计数器中的计数与对其设定的第一阈值相 比较，从而确定该数据是热数据还是冷数据。

在一种优选的实施方式中，目标数据的判定结果也被存储，可以在目标数据 中加入标记存储，也可以使用单独的冷数据文件存储全部判定为冷数据的目标 数据编号，以及使用单独的热数据文件存储全部判定为热数据的目标数据编号， 等等。

在步骤S302的一种实施方式中，在形成冷数据盘环前，判别是否需要形成 冷数据盘环。由于形成冷数据盘环要做一系列的操作，并且形成后要迁移数据， 如果冷数据量非常小，那么带来的好处和为达到这些好处的努力是不匹配的， 就无需形成冷数据盘环。具体的判别方法可以在确定冷热数据后，判别冷数据 与热数据之间的比例关系来判别是否需要形成冷数据盘环。例如，如果冷数据 占全部数据目标的比例大于设定的第二阈值，则确定需要形成冷数据盘环；否 则，不需要形成冷数据盘环。这里的第二阈值可以由系统管理员根据实际经验 设定。

在步骤S302的一种实施方式中，从主盘环中选择冷数据盘环的原则是根据 所述冷数据所在的磁盘位置。具体来说可以使用几种方式选择，在一种方式中， 可以计算所述主盘环包含的每个磁盘中冷数据的数据量，并根据每个磁盘中冷 数据的数据量对磁盘排序，根据所述排序，选择冷数据量大的多个磁盘组成所 述冷数据盘环，并且使得选择的多个磁盘的存储总量满足冷数据总量，并且磁 盘总个数最少。例如，主盘环包括20个2TB容量的磁盘，冷数据总量为2.6TB， 冷数据量较大的磁盘为编号为2、5、8的磁盘，冷数据量分别为1.0TB、0.5TB 以及0.3TB。则选择编号为2、5的磁盘存储总量已经达到4.0TB，最接近冷数 据总量的要求，且编号为2、5的磁盘满足了最少数量的磁盘，可以组成所述冷 数据盘环，其它编号的磁盘组成为热数据盘环。

在另外一种方式中，可以计算所述主盘环包含的每个磁盘中冷数据的比重， 并根据每个磁盘中冷数据的比重，选择冷数据量比重满足规定的第三阈值的磁 盘组成所述冷数据盘环，并且使得选择的多个磁盘的存储总量满足冷数据总量， 并且磁盘总个数最少。这里冷数据量比重定义为该磁盘的冷数据的数据量/该磁 盘的总目标数据的数据量，该磁盘的总目标数据的数据量就是该磁盘使用的全 部容量。或者也可以定义为该磁盘的冷数据的数据量/该磁盘的容量。例如，主 盘环包括10个2TB容量的磁盘，以及10个1TB容量的磁盘，冷数据总量为 2.6TB，冷数据量比重的设定阈值为50％，其中满足条件的磁盘编号依次为1、 2、10、18、19，这些编号放入队列。其中编号1、2、10的磁盘存储容量为2TB， 编号为18和19的磁盘储容量为1TB。则根据上述原则从队列开始进行选择， 可以选择编号为1和18的磁盘、也可以选择编号为1和19的磁盘、甚至选择 编号为2和18、或者2和19、或者10和18、或者10和19的磁盘，存储容量 最接近冷数据总量的要求，可以组成所述冷数据盘环，其它编号的磁盘组成为 热数据盘环，然后进行数据迁移。在上述众多的选择中，还可以进一步优化， 例如考虑磁盘的寿命因素，选择寿命更短的磁盘加入冷数据盘环，由于冷数据 的I/O操作较少，这样可以进一步提高整个系统的使用寿命。寿命因素考虑以 下至少一个因素：已经发生的I/O次数以及使用的年限。例如，上述编号为1、 2、10、18、19已经统计的I/O次数分别为12万、10万、14万、9万和15万 次，则将其作为受命因素，最后选择编号为10和19的磁盘组成所述冷数据盘 环。使用年限作为寿命因素或者使用使用年限和I/O操作次数二者的组合作为 寿命因素与此相似，这里不再赘述。

也可以将每个磁盘中冷数据的数据量、每个磁盘中冷数据的比重以及磁盘的 寿命因素赋予不同的权重，根据上述三个因素的综合评估结果来决定选择那些 磁盘加入到冷数据盘环。这里可以有无数的变种，都在本发明的保护范围之内。

一旦确定了冷数据盘环中包含的磁盘，在主盘环中剩余的磁盘就组成了热数 据盘环。

确定了冷数据盘环和热数据盘环所包含的磁盘后，就可以将不在冷数据盘环 中的冷数据迁移到冷数据盘环的磁盘中，并且将不在热数据盘环的热数据迁移 到热数据盘环的磁盘中。由于冷数据盘环的容量最接近于冷数据的总量，因此， 冷数据盘环没有过多的空余空间，因此，在数据迁移时，先将冷数据盘环中包 含的热数据迁移到热数据盘环的磁盘中，然后再将热数据盘环中的冷数据迁移 到冷数据盘环的磁盘中。由于冷数据盘环的主要目的是减少能源消耗，因此， 在冷数据盘环中冷数据如何放置也会影响电能的消耗，这里磁盘选择应该遵循 如下原则：将所述冷数据盘环的I/O操作集中到能耗最低的磁盘。例如，能耗 最低的磁盘可以是最低转速较低的磁盘。因此，在将热数据盘环中的冷数据迁 移到冷数据盘环的磁盘的过程中，可以首先将所有磁盘的能耗进行排序，然后 直接将每个冷数据目标迁移到冷数据盘环中能耗较低的磁盘，直至该磁盘满， 再对下一个能耗较低的磁盘进行类似操作。或者选择磁盘的能耗小于某一阈值 的磁盘，将冷数据目标迁移到选择的磁盘。等等。

在对热数据的迁移过程中，也可以尽可能将迁移的热数据放置在热数据盘环 的能耗较低的磁盘上，从而降低系统能耗。

在步骤S304的实施方式中，可以将冷数据盘环中磁盘的速度降为该磁盘的 最低速度，这样节省的能耗最多。也可以首先统计冷数据盘环中磁盘的I/O访 问次数，对于I/O访问较多的磁盘降速少，对于I/O访问较少的磁盘降速多， 这样，既可以减少能耗，也可以尽可能提高访问速度。

在一种实施方式中，图3所示的方法还包括步骤S305，根据设定的冷数据 条件，判定所述冷数据盘环中的每个目标数据是否仍然满足冷数据条件；以及 步骤S306响应于位于所述冷数据盘环中某个目标数据不再满足冷数据条件，将 该不再满足冷数据条件目标数据迁移到所述热数据盘环的磁盘中。在进一步的 实施方式中，图3所示的方法还包括步骤S307，根据设定的热数据条件，判定 所述热数据盘环中的每个目标数据是否仍然满足热数据条件；以及步骤S308 响应于位于所述热数据盘环中某个目标数据不再满足热数据条件，将该不再满 足热数据条件的目标数据迁移到所述冷数据盘环的磁盘中。迁移到热数据盘环 或者冷数据盘环的哪一个磁盘中，仍然依照前面给定的原则。

在一种实施方式中，图3所示的方法中，如果冷数据盘环或者热数据盘环的 容量不够，可以重新运行本方法，从而重新分配冷数据盘环和热数据盘环的存 储空间；也可以将冷数据盘环中存储容量最低的磁盘中的数据进行迁移，然后 将该磁盘加入到热数据盘环中，等等。

在同一个发明构思下，本发明还公开了一种分布式存储系统中的磁盘管理设 备，其中，所述分布式存储系统中包含多个组成主盘环的磁盘，所述多个磁盘 中存储目标数据，图5示出了根据本发明一种实施方式的分布式存储系统中的 磁盘管理设备的结构框图，根据图5，设备500包括：划分装置501，被配置为 将目标数据分为冷数据和热数据；分组装置502，被配置为根据所述冷数据和 热数据所在的磁盘位置，将所述主盘环中的部分磁盘形成冷数据盘环，所述主 盘环中的其余磁盘形成热数据盘环；第一迁移装置503，被配置为将不在所述 冷数据盘环的冷数据迁移到所述冷数据盘环的磁盘中，并将不在所述热数据盘 环的热数据迁移到所述热数据盘环的磁盘中；以及降速装置504，被配置为降 低所述冷数据盘环中磁盘的转速。

在一种实施方式中，划分装置501被进一步配置为：使用目标数据的I/O操 作次数判别该目标数据是冷数据还是热数据。

在一种实施方式中，设备500进一步包括(图5未示出)：第一判别装置， 被配置为在形成冷数据盘环前，判别是否需要形成冷数据盘环。在进一步的实 施方式中，第一判别装置被进一步配置为：通过判别冷数据与热数据之间的比 例关系来判别是否需要形成冷数据盘环。

在一种实施方式中，设备500的分组装置502进一步包括(图5未示出)： 冷数据的数据量计算装置，被配置为计算所述主盘环包含的每个磁盘中冷数据 的数据量；排序装置，被配置为根据每个磁盘中冷数据的数据量对磁盘排序； 以及第一选择装置，被配置为根据所述排序，选择冷数据量大的多个磁盘组成 所述冷数据盘环，并且使得选择的多个磁盘的存储总量满足冷数据总量，并且 磁盘总个数最少。

在一种实施方式中，设备500的分组装置502进一步包括(图5未示出)： 冷数据的比重计算装置，被配置为计算所述主盘环包含的每个磁盘中冷数据的 比重；以及第二选择装置，被配置为根据每个磁盘中冷数据的比重，选择冷数 据的比重满足设定的第三阈值的磁盘组成所述冷数据盘环，并且使得选择的多 个磁盘的存储总量满足冷数据总量，并且磁盘总个数最少。

在一种实施方式中，设备500的分组装置502选择形成所述冷数据盘环的磁 盘时加入磁盘寿命因素。

在一种实施方式中，设备500的第一迁移装置503的磁盘选择应该遵循如下 原则：将所述冷数据盘环的I/O操作集中到能耗最低的磁盘。、

在一种实施方式中，设备500还包括(图5未示出)：第二判别装置，被配 置为根据设定的冷数据条件，判定所述冷数据盘环中的每个目标数据是否仍然 满足冷数据条件；第二迁移装置，被配置为响应于位于所述冷数据盘环中某个 目标数据不再满足冷数据条件，将该不再满足冷数据条件目标数据迁移到所述 热数据盘环的磁盘中；第三判别装置，被配置为根据设定的热数据条件，判定 所述热数据盘环中的每个目标数据是否仍然满足热数据条件；以及第三迁移装 置，被配置为响应于位于所述热数据盘环中某个目标数据不再满足热数据条件， 将该不再满足热数据条件的目标数据迁移到所述冷数据盘环的磁盘中。

本发明可以是系统、方法和/或计算机程序产品。计算机程序产品可以包括 计算机可读存储介质，其上载有用于使处理器实现本发明的各个方面的计算机 可读程序指令。

计算机可读存储介质可以是可以保持和存储由指令执行设备使用的指令的 有形设备。计算机可读存储介质例如可以是――但不限于――电存储设备、磁 存储设备、光存储设备、电磁存储设备、半导体存储设备或者上述的任意合适 的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：便携式 计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编 程只读存储器(EPROM或闪存)、静态随机存取存储器(SRAM)、便携式压缩 盘只读存储器(CD-ROM)、数字多功能盘(DVD)、记忆棒、软盘、机械编码 设备、例如其上存储有指令的打孔卡或凹槽内凸起结构、以及上述的任意合适 的组合。这里所使用的计算机可读存储介质不被解释为瞬时信号本身，诸如无 线电波或者其他自由传播的电磁波、通过波导或其他传输媒介传播的电磁波(例 如，通过光纤电缆的光脉冲)、或者通过电线传输的电信号。

这里所描述的计算机可读程序指令可以从计算机可读存储介质下载到各个 计算/处理设备，或者通过网络、例如因特网、局域网、广域网和/或无线网下载 到外部计算机或外部存储设备。网络可以包括铜传输电缆、光纤传输、无线传 输、路由器、防火墙、交换机、网关计算机和/或边缘服务器。每个计算/处理设 备中的网络适配卡或者网络接口从网络接收计算机可读程序指令，并转发该计 算机可读程序指令，以供存储在各个计算/处理设备中的计算机可读存储介质 中。

用于执行本发明操作的计算机程序指令可以是汇编指令、指令集架构 (ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、 或者以一种或多种编程语言的任意组合编写的源代码或目标代码，所述编程语 言包括面向对象的编程语言—诸如Java、Smalltalk、C++等，以及常规的过程 式编程语言—诸如“C”语言或类似的编程语言。计算机可读程序指令可以完全地 在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执 行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或 服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的 网络—包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连 接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。在一些实施 例中，通过利用计算机可读程序指令的状态信息来个性化定制电子电路，例如 可编程逻辑电路、现场可编程门阵列(FPGA)或可编程逻辑阵列(PLA)，该 电子电路可以执行计算机可读程序指令，从而实现本发明的各个方面。

这里参照根据本发明实施例的方法、装置(系统)和计算机程序产品的流 程图和/或框图描述了本发明的各个方面。应当理解，流程图和/或框图的每个方 框以及流程图和/或框图中各方框的组合，都可以由计算机可读程序指令实现。

这些计算机可读程序指令可以提供给通用计算机、专用计算机或其它可编 程数据处理装置的处理器，从而生产出一种机器，使得这些指令在通过计算机 或其它可编程数据处理装置的处理器执行时，产生了实现流程图和/或框图中的 一个或多个方框中规定的功能/动作的装置。也可以把这些计算机可读程序指令 存储在计算机可读存储介质中，这些指令使得计算机、可编程数据处理装置和/ 或其他设备以特定方式工作，从而，存储有指令的计算机可读介质则包括一个 制造品，其包括实现流程图和/或框图中的一个或多个方框中规定的功能/动作的 各个方面的指令。

也可以把计算机可读程序指令加载到计算机、其它可编程数据处理装置、 或其它设备上，使得在计算机、其它可编程数据处理装置或其它设备上执行一 系列操作步骤，以产生计算机实现的过程，从而使得在计算机、其它可编程数 据处理装置、或其它设备上执行的指令实现流程图和/或框图中的一个或多个方 框中规定的功能/动作。

附图中的流程图和框图显示了根据本发明的多个实施例的系统、方法和计 算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图 中的每个方框可以代表一个模块、程序段或指令的一部分，所述模块、程序段 或指令的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有 些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺 序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以 按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图 中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能 或动作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的 组合来实现。

以上已经描述了本发明的各实施例，上述说明是示例性的，并非穷尽性的，并 且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情 况下，对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。 本文中所用术语的选择，旨在最好地解释各实施例的原理、实际应用或对市场 中的技术的技术改进，或者使本技术领域的其它普通技术人员能理解本文披露 的各实施例。