基于多路径遍历优先选择的缺失数据云存储方法

以完善缺失的数据云存储技术为目的,提出基于多路径遍历优先选择的缺失数据云存储方法。该方法利用前馈神经网络对缺失数据进行冗余数据处理后,先使用高斯混合模型和最大期望算法对清洗后的缺失数据进行均值修正,提升缺失数据的完整性;然后以均值修正后的缺失数据为基础,使用多路径遍历优先选择方式选取缺失数据存储路径后,按照云计算体系结构和缺失数据存储需求,建立缺失数据云存储技术架构;最后按照缺失数据存储路径对其进行云存储。实验结果表明：该方法在云存储缺失数据时读、写操作消耗时间较短,且不存在缺失数据漏处理情况;其在缺失数据云存储过程中缺失数据文件大小不同时吞吐量数值较高,且受运行线程数量影响较小。     

基于特征迭代的云存储数据即时确定性删除方法

传统数据删除方法易受到云存储环境中大量近似特征的影响,产生冗余数据,导致加解密时间过长、密钥可用率较低,为此提出一种基于特征迭代的云存储数据即时确定性删除方法。首先,提取云存储数据中的冗余数据特征,对云存储下冗余数据进行分类,迭代直至收敛,实现冗余数据高性能删除;其次,采用加密机制实现云存储数据在网络用户间的安全共享,将原始数据密文切分为剩余密文和采样密文;最后,把不完整的剩余数据密文上传至云端,同时引入可信任第三方对取样密文进行保存,通过销毁取样密文实现数据即时确定性删除。实验结果表明,所提方法的数据密文拆分所用时间较短,且密钥可用率较高,可达90%,说明其方法能够有效满足云存储系统中对冗余数据或过期数据的确定性删除要求。     

基于干扰对齐的高效云存储方法研究综述

云存储/分布式存储主要靠存储冗余和高效的节点修复机制保障其可靠性。将干扰对齐技术引入到云存储的节点修复问题中,利用干扰对齐可以将节点修复时传输的干扰数据压缩到较小的空间维度中,使待修复节点所需的期望数据维度较大,在保证高可靠性的同时降低修复开销,节约云存储成本。首先介绍了云存储/分布式存储中的节点修复问题,然后对干扰对齐在云存储/分布式存储中的重要意义和国内外的研究进展进行了阐述,最后分析了存在的主要问题和下一步研究重点。     

云计算技术在存储系统中的应用

随着经济的发展和科技的进步,计算机网络技术同样得到飞速发展.繁忙的日常工作可能会需要面对和处理异常庞大的数据量和信息量,尤其是数据信息比较重要时,更是少不了巨大的数据空间进行冗余数据存储和备份.短期内或许还能够接受,但是长期的数据累积存储就会使得传统存储方式显得成本高、效率低.云计算理论衍生出的云存储技术能够有效解决这一问题.本文通过简述云计算和云存储技术,建立云存储的结构模型,最后对云存储优点进行了总结概括.     

基于纠删码的动态副本冗余存储研究

为保证数据的完整性和可靠性,云存储中主要采用多副本和纠删码两种存储策略对数据进行冗余保存.针对单一冗余存储策略的不足,考虑存储开销和访问质量等方面因素,根据用户访问数据的规律,提出一种基于纠删码的动态副本冗余存储方案.采用RC纠删码来存储云中海量数据,使用曲线拟合预测访问热度,适时调整副本的数量.实验结果表明,该方案空间利用率高,能有效减小用户访问的平均延迟,提高用户访问的成功率.     

基于私有云的数据冗余技术研究

作为云计算技术的一个分支,云存储的应用逐渐兴起.文章介绍了私有云存储的概念和特点.在此基础上结合私有云存储的环境,对几种数据冗余方式进行了分析比较.     

医学影像云存储模型的研究与设计

为解决早期云计算模型对医学小文件存储出现的单节点问题,数据高冗余造成数据的不一致性以及检索效率低等方面的问题,提出一种新型云存储模式。模型中,引入BWFS算法实现优化海量医学小文件序列化合并,优化纠删码算法实现数据块编码,减少数据块的冗余存储,而且引入位图索引技术与HBase索引结合形成新型并行索引策略,优化HBase主索引的缺点。实验表明,新型存储模型通过使用BWFS算法和纠删码技术减少了集群主控节点的内存消耗,在保证数据快速恢复的情况下,减少了集群数据的冗余存储,并行索引技术提高了医学数据影像的检索效率。     

基于重复数据删除的虚拟桌面存储优化技术

虚拟桌面基础架构依靠数据中心海量的云基础设施,为用户按需提供虚拟桌面部署所需的软硬件资源,但同时面临存储资源利用率低和虚拟机启动慢的困境.针对虚拟桌面存储中具有大量数据冗余的特性,采用重复数据删除技术缩减虚拟桌面基础架构的存储空间需求;并利用服务器本地磁盘缓存以及共享存储池内的固态硬盘来优化虚拟机的启动性能.通过原型实现,发现相比于基于内容分块的策略,静态分块策略更适合虚拟桌面存储进行重复数据删除,最优的分块大小为4KB,并能够缩减85%的存储空间容量;通过服务器本地磁盘缓存和基于闪存的固态硬盘进行I/O优化,虚拟机的启动速度能够获得35%的提升.     

一种云存储系统数据持久存储机制

针对云存储中的可靠性产生的担忧,提出一种云存储系统完善的数据存储保障机制,以保证系统的高可靠性和数据的高可用性。在处理与数据持久存储的相关的数据分片、数据分发、完整性检查以及冗余数据的维护中,引入基于纠删码的数据冗余机制,与传统的复制冗余方案相比,能够在获得相同的数据可用性时降低存储空间和网络带宽的开销多达50%以上。采用基于缓冲区的分段读入编码对纠删码算法进行优化后,提高了对文件分片与合并的平均编码速率。     

一种区块链数据的云存储与共享方法

为了在不信任的环境中达成共识,区块链节点需要冗余地存储完整的区块链数据,对节点的存储要求很高.提出一种区块链数据的存储方法,设置M个云存储共享模块用于存储完整的区块链以及节点数字签名,节点将区块及其数字签名存储到若干个云存储共享模块.当区块链节点数量N足够大时,能够选择合适的M(M<相似文献   

一个基于第三方数据传送的SAN数据共享系统

在SAN 环境下实现了一个开放系统与大型机数据共享系统, 克服了传统客户/ 服务器数据共享模型的缺点, 能有效地提高系统的数据传送性能; 提出了一种基于共享磁盘映射关系的第三方数据传送方法, 由于共享磁盘映射关系是动态建立的, 因而系统具有良好的可扩展性; 最后讨论了冗余存储路径容错和访问负载均衡功能的实现策略。     

面向云存储的多副本文件完整性验证方案

文件完整性验证是云存储服务的一项重要安全需求.研究者已经提出多项针对云存储文件完整性验证的机制,例如数据持有性验证(prove of data possession,PDP)或者数据可恢复证明(proof of retrievability,POR)机制.但是,现有方案只能够证明远程云存储持有一份正确的数据,不能检验其是否保存多份冗余存储.在云存储场景中,用户需要验证云存储确实持有一定副本数的正确文件,以防止部分文件意外损坏时无法通过正确的副本进行恢复.提出的多副本文件完整性验证方案,能够帮助用户确定服务器正确持有的文件副本数目,并能够定位出错的文件块位置,从而指导用户进行数据恢复.实验证明,充分利用了多服务器分布式计算的优势,在验证效率上优于单副本验证方案.     

云存储服务中可证明数据持有及恢复技术研究

云存储可以实现任意地点、任意时间、任意数据访问及保障法规遵从的需求等.对存储需求不可预测、需要廉价存储的用户来说,按需购买存储容量的云存储与一次性购买整套存储系统相比显然会带来更多的方便和效益,且云存储在为用户节省投资的同时也节约了社会资源与能源.但是,因为云存储的安全性、可靠性及服务水平等还存在众多问题亟待解决,所以云存储还未得到人们的广泛认可与使用.当用户将数据存放在云存储中,他们最关心的是数据是否完整无误;如果出现故障,是否可以恢复其数据.所以,在云存储中只有让用户可以验证存储服务提供者正确地持有其数据,且当检测到错误时可实现数据恢复,他们才可放心地使用云存储.综述了可证明数据持有及恢复技术在国内外的研究现状,讨论了云存储服务的安全性与可靠性需求,并研究云存储服务对可证明数据持有及恢复方案的特殊要求,从而明确在云存储环境下可证明数据持有及恢复技术的研究方向.     

分布式磁盘阵列的结构及冗余策略

分布式磁盘阵列对于提高数据存储的可靠性、带宽和容量，具有十分重要的意义。本文介绍了分布式磁盘阵列的两种连接方式，磁盘分布连接到计算机和磁盘阵列连接到网络，以及在分布式磁盘阵列中得到应用的两种冗余策略，Chained declustering和RAID-x。     

基于NBD的弹性云存储研究与设计

目前市场上各大厂商提供给用户的云存储服务都有各自的特点,针对其普遍存在的容量大小受限、单文件大小限制、数据安全等问题。提出了基于网络块设备的弹性云存储的模型,实现一个简单易操作的符合基本用户实际使用的弹性云存储系统。该模型采用NBD(Network Block Device)作为客户端与服务器交互的接口,以HLFS(Hadoop Log-Structured File System)为弹性云平台提供虚拟磁盘后台存储服务,实现文件的分布式存储及容错控制等。测试结果表明,该方式能有效自动增加磁盘容量,对单文件大小无限制,读写数据一致并且能有效防止数据遗失。     

云存储系统的分区编码冗余方法研究

文章根据云存储的结构特点,将数据存储区域划分本地副本区、本地编码区、远端编码区。本地编码区和远端编码区采用确定型网络编码来实现数据的冗余备份。将解码过程的所有系数矩阵进行三角分解并保存为查找表,采用查表方法辅助方程组求解,减少计算量。实验结果表明,当单个存储结点的可用性在0.7至0.99之间、数据可用性目标为99.99999%时,采取数据分片数为8的方案,该方法的平均每字符运算次数低于3次,比副本冗余方法节省50%以上的存储空间.分区编码冗余方法解码速度快,能够显著提高云存储系统的可用性和存储效率.     

面向云存储的安全存储策略研究

云存储是未来信息存储的一种理想方式,它提供方便易用的外包存储空间,以缓解爆炸增长的信息对存储空间的海量需求.但是,由于云存储用户担心自己的数据丢失,缺乏对云存储的信任,导致云存储推广普及变得困难.提出一种面向云存储的安全存储模型及存取策略,旨在解决私密信息在云中存储的数据安全性和用户匿名性的问题,并对其安全性进行了分析...     

面向云数据安全存储的分段融合模糊聚类算法

为了提高云数据的安全存储性能,需要对数据进行优化属性聚类归集。针对传统方法采用模糊C均值聚类进行云数据存储归类设计具有对初始聚类中心敏感、容易陷入局部收敛的问题,提出一种基于分段融合模糊聚类的云数据安全存储模型构建方法。建立云数据安全存储的网格分布结构模型并进行数据结构分析,进行云数据属性集的向量量化特征分解,对海量的云存储数据流采用分段匹配检测方法进行特征压缩,实现冗余数据自适应归集合并,挖掘云数据信息流的高阶谱特征。在模糊C均值聚类算法的基础上采用分段数据融合进行数据分簇模糊聚类,提高数据存储的安全性,同时降低云数据存储的负荷。仿真结果表明,采用该方法进行云数据聚类和优化存储设计,能降低数据聚类的误分率,提高云数据存储的吞吐量,确保云数据的安全存储。     

iOS系统数据持久化综述

所谓持久化,即把数据存储到可永久保存的存储设备中.持久化的主要应用是将内存中的数据存储在关系型的数据库中.持久化技术目前被广泛应用于各种程序设计的领域中.在要探讨的iOS中的数据持久化技术中,iOS系统中主要提供了几种方式用于简单地实现数据持久化功能:内存存储以及磁盘存储、数据库存储等.对于以持久化的意义有很多,比如能...     

云端存储 更快更省心

小笨由于工作需要,经常会在单位和家庭两地交换各种办公数据,为方便办公,他一般都先从网络上将资源下载到本地磁盘后,再将资源上传到云存储服务。但是每次交换数据,都需要将网络资源下载到本地磁盘上,再上传到云存储服务,一来一去