存储优化

摘要： 区块链具有去中心化、不可篡改、可追溯以及公开透明等特性,可以解决去中心化网络中节点之间相互不信任的问题,为构建价值互联平台提供了可能.然而,区块链要求每个节点都存储一份完整的数据,以高存储冗余来保证数据的可靠性,给节点带来了巨大的存储压力,降低了存储资源的利用效率,也导致系统的存储可扩展性成为区块链性能的一个瓶颈.采用纠删码来编码存储在区块链中的数据可以有效地减少存储冗余,但存储冗余的减少会降低数据的可靠性,引发数据的重组消耗,提高数据的读取延迟.目前已有研究在区块链编码数据块的存储分配阶段并没有考虑节点间延迟、区块存储位置等因素对数据可靠性和读取延迟的影响.本文在基于纠删码的BFT联盟链中,研究编码数据块的存储数量及存储位置决策问题,以在满足数据可靠性的约束下实现数据存储代价和数据读取性能的平衡.针对编码数据块的存储数量及存储位置决策问题,本文提出了延迟感知的编码数据块分配算法(Latency-aware Encoded data chunks Allocation algorithm,LEA).算法LEA首先求解编码数据块的存储数量及存储位置决策问题的松弛问题以及该松弛问题的对偶问题,然后根据松弛问题及其对偶问题的最优解依次为每个编码数据块确定其存储数量和存储位置,最后调整得到的编码数据块存储分配方案使其满足被松弛的约束条件.理论分析证明,算法LEA是ln 3+2近似算法.仿真环境和真实联盟链系统中的实验结果表明,算法LEA可以有效降低区块链系统的存储冗余,提高系统的存储可扩展性,并实现良好的数据存储代价和数据读取性能的平衡.

摘要： 随着油气勘探开发智能化应用越来越成熟、应用场景越来越丰富,大规模应用日益临近,样本的分布式存储、高效采集及并行计算已成为油气勘探开发智能化应用的迫切需求。地震勘探的智能化是油气勘探开发智能化的重要组成部分。针对地震勘探数据具有的单一文件数据量大、非结构化的特点,在分析地震勘探大数据样本采集需求的基础上,提出基于Hadoop分布式文件系统(HDFS)的大文件分割和合并的解决方案,并对地震勘探数据生成3个不同维度的冗余存储,以提升地震勘探样本的采集效率。测试结果表明,基于HDFS的三倍冗余存储方案在数据量迅速增大的情况下,可以有效地提高地震勘探大数据样本的采集效率,从而满足地震勘探智能化应用需求。

摘要： 在基于区块链的物联网数据共享中,区块链要求节点具备大量的存储资源,这极大阻碍了更多物联网设备加入共享。针对这个问题,提出一种适用于物联网数据共享的区块链节点存储优化方案。该方案提出适用于物联网数据共享场景的存储模型,引入部分重复码对实用拜占庭容错算法进行改进,在共识过程中完成区块链账本的优化存储。实验分析表明,该方案能够在保证共识效率和容错性的同时,大幅降低区块链节点的存储开销。

摘要： 摄像设备在生活中的普及,使得视频数据快速增长,这些数据中蕴含丰富的信息.早期,研究人员基于传统的计算机视觉技术开发视频分析系统,用于提取并分析视频数据.近年来,深度学习技术在人脸识别等领域取得了突破性进展,基于深度学习的新型视频分析系统不断涌现.从应用、技术、系统等角度,综述了新型视频分析系统的研究进展.首先,回顾了视频分析系统的发展历史,指出了新型视频分析系统与传统视频分析系统的区别;其次,分析了新型视频分析系统在计算和存储两方面所面临的挑战,从视频数据的组织分布和视频分析的应用需求两方面探讨了新型视频分析系统的影响因素;再次,将新型视频分析系统划分为针对计算优化的系统和针对存储优化的系统两大类,选取其中典型的代表并介绍其核心设计理念;最后,从多个维度对比和分析了新型视频分析系统,指出了这些系统当前存在的问题,并据此展望了新型视频分析系统未来的研究和发展方向.

摘要： 摄像头视频编码标准的选择和视频流码率的调节,是直接影响视频流大小以及后端存储容量消耗速度快慢的关键因素;而在使用虚拟化存储技术的视频监控系统中,虚拟资源池的应用配置能实现存储容量的个性化分配。以上两个方面的理论分析及应用,对实现在用视频监控系统录像存储天数提升和差异化配置的精细化管理有一定参考价值。在以数字化网络为架构的视频监控系统中,用户可方便快捷地增加前端监控点位,但前端监控点的增加带来的是后端存储资源消耗加快的压力。

摘要： 舱室货物存储优化需要考虑众多因素,其不易寻优得到理想的优化解。为尽可能地提升取货效率,文章提出了一种应用于舱室货物存储优化的免疫飞蛾扑火算法,其将免疫机制融入飞蛾扑火算法中。标准测试函数和舱室货物存储优化算例的仿真结果表明,所提出的免疫飞蛾扑火算法具有更高的寻优精度和较快的计算速度。

摘要： 区块链是一种结合分布式共识、加密、时间戳等方法,在不依赖任何第三方中心化机构的情况下,实现点对点交易、协调以及协作的技术.近几年,区块链技术的不断发展引起了产业界和学术界的极大兴趣.但是,区块链的存储可扩展性问题,提高了区块链设备的门槛,成为了区块链应用落地的瓶颈.介绍了区块链的基本原理和存储模型,分析了当前区块链所面临的存储问题;然后,针对区块链存储可扩展性问题,从链下存储和链上存储这两条技术路线出发,论述了主要的解决方案的原理与思路;最后,总结了提高区块链存储可扩展性的技术研究进展,指出了当前解决方案所面临的问题,为未来的研究工作提供了方向.

摘要： 提出了基于区块链的无线路由监测数据存储优化方法.引入区块链技术搭建无线路由监测数据存储架构,选取适当的共识机制,计算哈希值,获取无线路由监测数据区块链,构造能够加强监测数据存储性能的双链存储模型,利用椭圆曲线数字签名算法验证无线路由监测数据的安全性与完整性,实现基于区块链的无线路由监测数据的存储优化.实验结果表明:提出方法的数据存储响应时间相对较低,数据完整性参数高,提出的无线路由监测数据存储优化方法对监测数据存储优化的能力更优,具有应用推广价值.

摘要： 提出了基于区块链的无线路由监测数据存储优化方法。引入区块链技术搭建无线路由监测数据存储架构,选取适当的共识机制,计算哈希值,获取无线路由监测数据区块链,构造能够加强监测数据存储性能的双链存储模型,利用椭圆曲线数字签名算法验证无线路由监测数据的安全性与完整性,实现基于区块链的无线路由监测数据的存储优化。实验结果表明:提出方法的数据存储响应时间相对较低,数据完整性参数高,提出的无线路由监测数据存储优化方法对监测数据存储优化的能力更优,具有应用推广价值。

摘要： 为了提高Hive的查询性能,对HDFS数据块放置策略进行了优化,提出了一种基于相关关系分析的数据块放置策略,通过构建并发关系矩阵和相交关系矩阵评估待放置数据块与节点上已放置数据块之间的相关关系,并综合目标数据块的访问频率,选择合适的节点存储。

摘要： 高光谱遥感图像降维是高光谱遥感图像处理必不可少的过程,该过程具有数据量大、计算量大、处理时间长的特点.利用图像处理单元GPU的通用计算能力,可以大幅加快程序处理速度,但要想完全发挥出GPU的计算性能,又必须针对GPU的存储体系进行存储优化.针对典型的高光谱数据降维方法——主成分分析(PCA)算法进行GPU加速及存储优化研究,通过合理的CPU/GPU任务划分、通信优化、访存优化等手段大幅提升了程序的运行速率.实验结果显示,存储优化后的GPU程序相对未优化的GPU程序,最高能获得2.6倍加速比;GPU并行PCA算法总时间相对串行PCA,最高能获得122倍加速比.研究表明GPU通用计算在高光谱遥感图像处理领域有广泛的应用前景.

摘要： 作为数据流图的一个子集,同步数据流图(Synchronous Dataflow或SDF)已被证明适合描述DSP系统.由于嵌入式DSP系统存储资源的有限性,需尽可能减少系统存储需求量以改善系统性能.为了减少嵌入式DSP系统的存储需求,本文在一种新的数据缓冲模型的基础上,采用遗传算法对使用SDF图描述的嵌入式DSP系统进行存储优化.实验结果证实了该方法的有效性.

摘要： 本文针对数据仓库的检索和存储优化展开讨论,提出了一种能够有效提高OLAP(联机分析处理)的策略.文中将数据量大的表进行拆分重组,将其中的各个索引建立为独立的索引表.这样,原来的一个大表就分割成由几个索引表和剩余信息组成的表的集合.这些索引表反映了大表不同维的信息,可以单独使用.当根据索引检索时不用扫描表中的所有信息,而只需扫描索引表即能找到.利用索引表进行检索有效的减少了检索范围,从而提高了检索效率.将该方法应用于实际系统中,取得了显著效果,具有很强的实际意义.

摘要： 随着自动化技术的不断发展,梯调监控历史数据量不断膨胀,有限资源与海量历史数据存储需求之间的矛盾日益显著.本文针对梯调监控系统历史数据存储优化这一问题,加以分析,并给出相应的解决方案.

摘要： 虚拟桌面基础架构依靠数据中心海量的云基础设施，为用户按需提供虚拟桌面部署所需的软硬件资源，但同时面临存储资源利用率低和虚拟机启动慢的困境.针对虚拟桌面存储中具有大量数据冗余的特性，采用重复数据删除技术缩减虚拟桌面基础架构的存储空间需求;并利用服务器本地磁盘缓存以及共享存储池内的固态硬盘来优化虚拟机的启动性能.通过原型实现，发现相比于基于内容分块的策略，静态分块策略更适合虚拟桌面存储进行重复数据删除，最优的分块大小为4KB，并能够缩减85%的存储空间容量;通过服务器本地磁盘缓存和基于闪存的固态硬盘进行I/O优化，虚拟机的启动速度能够获得35%的提升.

摘要： 一种用于基于生成“意图”或“提示”并将其传递给存储设备来进行数据通信优化和/或较快/较慢固态存储器优化的体系结构。可对预定存储在存储设备(能够进行提示处理)上的数据进行分类以利用与该提示处理相关联的提升的性能。数据能够以块格式传递以使得能够发生一系列单独的块交换。提示处理在存储设备处是可任选的。在被传递给存储设备时，固件方便优化内部数据流和设备操作。向诸如固态存储设备等存储系统提供一种写优化方案。例如，频繁修改的数据可被存储在较快的存储器中以提供更高效的总体应用程序数据处理，而较不频繁修改的数据可被处理进出较低成本(或较慢)的存储器。

摘要： 本申请公开了一种存储单元性能优化方法，本方法通过统计得到的每个存储单元的读写操作平均耗时、每个存储单元中的主副本的被执行的读写操作次数这两个参数来衡量每个存储单元的主亲和性，并根据主亲和性的大小在每个周期调整每个存储单元中存储的作为主副本的副本数量，以通过动态调整的方式优化压力分布，使得每个存储单元的压力更加平均，尽可能的防止某个存储单元因压力过大导致使用寿命快速缩短和对分布式文件系统整体性能的拖累。本申请还同时公开了一种存储单元性能优化装置、存储设备及计算机可读存储介质，具有上述有益效果。

摘要： 用于连接到主机的存储设备的优化的提示模型和用于存储设备的写优化方案。一种用于基于生成“意图”或“提示”并将其传递给存储设备来进行数据通信优化和/或较快/较慢固态存储器优化的体系结构。对预定存储在存储设备(能够进行提示处理)上的数据进行分类以利用与该提示处理相关联的提升的性能。数据能以块格式传递以使得能够发生一系列单独的块交换。提示处理在存储设备处是可任选的。在被传递给存储设备时，固件方便优化内部数据流和设备操作。向诸如固态存储设备等存储系统提供一种写优化方案。例如，频繁修改的数据被存储在较快的存储器中以提供更高效的总体应用程序数据处理，而较不频繁修改的数据被处理进出较低成本(或较慢)的存储器。

摘要： 一种用于基于生成“意图”或“提示”并将其传递给存储设备来进行数据通信优化和/或较快/较慢固态存储器优化的体系结构。可对预定存储在存储设备(能够进行提示处理)上的数据进行分类以利用与该提示处理相关联的提升的性能。数据能够以块格式传递以使得能够发生一系列单独的块交换。提示处理在存储设备处是可任选的。在被传递给存储设备时，固件方便优化内部数据流和设备操作。向诸如固态存储设备等存储系统提供一种写优化方案。例如，频繁修改的数据可被存储在较快的存储器中以提供更高效的总体应用程序数据处理，而较不频繁修改的数据可被处理进出较低成本(或较慢)的存储器。

摘要： 本发明提供一种存储器效能优化方法、存储器控制电路单元以及存储器存储装置。此方法包括：在主动模式中，计数所述存储器存储装置的闲置时间；响应于所述闲置时间大于闲置阈值，指示所述存储器存储装置由所述主动模式进入第一低耗电模式；在所述第一低耗电模式中，计数所述存储器存储装置的第一等待时间；以及响应于所述第一等待时间大于第一等待阈值，指示所述存储器存储装置由所述第一低耗电模式进入第二低耗电模式，其中所述第二低耗电模式的耗电量低于所述第一低耗电模式的耗电量。

摘要： 一种优化细胞保存的细胞存储器、包含该细胞存储器的细胞存储装置、及其细胞存储方法，该细胞存储器包括细胞存储单元(7)、外壳(9)和电场输出单元(6)；所述细胞存储单元(7)和所述电场输出单元(6)设置在所述外壳(9)内；所述电场输出单元(6)包括电极片(8)，该电极片(8)设置在细胞存储单元(7)外侧；在所述细胞存储单元(7)和所述电场输出单元(6)之间设置有绝缘的介质(11)进行防护；在细胞存储期间，所述电场输出单元(6)对所述细胞存储单元(7)中的保存对象施加静电场干扰，场强范围在5‑40kV/m。从而，在细胞制品保存的过程中，降低溶剂的冰点，降低细胞的冷藏温度，减缓代谢；抑制冰晶的形成，减少冻存时的机械损伤，起到提高细胞活力的效果。

摘要： 本申请公开了一种存储单元性能优化方法，本方法通过统计得到的每个存储单元的读写操作平均耗时、每个存储单元中的主副本的被执行的读写操作次数这两个参数来衡量每个存储单元的主亲和性，并根据主亲和性的大小在每个周期调整每个存储单元中存储的作为主副本的副本数量，以通过动态调整的方式优化压力分布，使得每个存储单元的压力更加平均，尽可能的防止某个存储单元因压力过大导致使用寿命快速缩短和对分布式文件系统整体性能的拖累。本申请还同时公开了一种存储单元性能优化装置、存储设备及计算机可读存储介质，具有上述有益效果。

摘要： 本发明涉及优化装置、优化方法及用于存储优化程序的存储介质。优化装置被配置成执行迭代处理直到满足预定条件为止，该迭代处理包括：在距离指示目标函数的变量的值的第一参考值的预定范围内，生成近似于目标函数的二次函数的处理；通过寻找二次函数的极值来计算指示变量的值的第二参考值的处理；基于第二参考值和第一参考值来计算指示变量的值的第三参考值的处理；以及基于第三参考值来更新第一参考值的处理，所述预定条件是关于第一参考值与第二参考值之间的距离或者第一参考值与第三参考值之间的距离的条件。

摘要： 本发明涉及优化设备、优化方法和用于存储优化程序的存储介质。由计算机在通过模拟施加至伊辛模型的磁场减小时该伊辛模型的状态变化来尝试求解该伊辛模型的基态时执行的优化方法，该伊辛模型表示要求解的问题，该方法包括：执行第一处理，所述第一处理为实时传播，在实时传播中，磁场的强度在模拟中随着时间的进行而减小；以及响应于第一处理的实时传播的时间的进行，执行第二处理，所述第二处理包括基于虚时传播方法减小伊辛模型的能量。

摘要： 本发明涉及优化装置、优化方法和用于存储优化程序的存储介质。优化方法包括：针对其中的每一个具有多个状态变量的多个副本中的每个副本，识别在更新副本的多个状态变量中的第一状态变量的值的情况下的与状态空间中的副本和另一副本之间的距离的变化对应的相互作用的强度的变化量，所述状态空间指示多个状态变量的值的组合能够占用的空间；以及基于在更新所述第一状态变量的值的情况下的与相互作用的强度的变化量对应的提议概率并且基于与目标概率分布对应的接受概率，确定是否更新第一状态变量的值。