首页 | 本学科首页   官方微博 | 高级检索  
相似文献
 共查询到19条相似文献,搜索用时 156 毫秒
1.
基于对等网络的面向小文件的云存储系统   总被引:2,自引:0,他引:2  
针对目前主从结构的云存储系统在存储小文件延迟过大的问题,提出基于对等网络(P2P)的分布式云存储系统.通过改进Chord路由算法提高了资源的查询效率,在系统中引入中心路由节点,中心路由节点上存储系统中所有节点的路由和状态信息,使资源查询时间复杂度缩短到O(l),客户端预取中心路由节点数据,从而减少数据操作时的时间开销;系统通过备份的策略来保证数据的可靠性,实现中数据备份数为3;系统实现了文件存储、读取、删除及列目录等基本操作功能.实验结果表明,与Hadoop HDFS文件系统相比,该系统的小文件操作时间减少了一个数量级.  相似文献   

2.
提出了一种针对海量无线电监测数据的分布式存储系统的体系结构。结合Hadoop云计算平台和HBase分布式数据库的存储特点,在Linux平台下设计了针对海量无线电监测数据的分布式存储系统。该系统旨在对海量分布式无线电监测数据进行快速、高效、可靠地处理,用以满足无线电监测管理部门对监测数据的存储、检索和分析的需求。  相似文献   

3.
面向分布式存储的安全云存储系统研究   总被引:1,自引:0,他引:1  
云环境下的分布式存储主要研究数据在数据中心上的组织和管理,数据中心通常由百万级以上节点组成,云存储系统所存储的数据规模往往达到PB级甚至EB级,一些数据安全的隐患也由此产生。本文首先介绍了云存储系统的安全需求;然后阐述了安全云存储系统的研究现状;并采用一些关键技术设计了一种安全云存储系统。其中包括密钥分发与管理、用户与存储节点身份认证机制、安全分布式文件系统的基本操作等。最后指出了下一步研究的方向。  相似文献   

4.
存储系统是集群系统中重要的组成部分,数据放置策略的优劣直接影响存储系统的性能.针对现有集群数据放置策略单一、可用性不高的特点,根据文件大小,结合现有的数据放置策略提出了hybrid-declustering放置策略,建立了集群存储系统模型,并在模型的磁盘管理中引入了分组的思想,实现了数据的分布式和高可用存储,和现有模型相比,提高了集群系统存储的可用度.  相似文献   

5.
针对飞参数据量快速增加及用于查询和分析的数据使用特点,提出采用数据库集群存储飞参数据的分布式数据存储方案;提出一种按照飞机故障分析的数据使用特征进行数据分区的飞参数据划分方法。实验结果显示,这种存储方案缩短了查询响应时间。结论是利用数据库集群存储飞参数据,支持对飞参数据的并行访问,飞参数据的存储扩充容易;按照故障分析属性的数据分区策略提高了故障分析时飞参数据的查询效率。  相似文献   

6.
网络编码的分布式存储系统理论分析   总被引:1,自引:1,他引:0  
为了研究网络编码在分布式存储系统中的性能,建立了无线传感网络(WSN)中的分布式存储模型,从双向图的角度推导出系统中数据节点、存储节点以及所需查找的节点之间的折衷关系。该理论公式尤其对于能耗受限的无线传感网络的分布式存储实现,具有一定的指导意义。  相似文献   

7.
分析了光电对抗半实物仿真系统的主要目的,论述了该仿真系统的数据采集模式,发现了难点在于如何实现对实时数据的及时和完整的采集,提出了使用基于分布式存储的方法来实现对大批量实时数据的存储,并将该方法和直接向数据库进行数据插入作了对比,通过对两种方法的数据插入时间的采集和比较,分析了使用分布式存储方法的优点,不但解决了Oracle数据库管理系统对于数据存储速率的瓶颈问题,同时也保证了数据的完整性和可靠性,最终实现了这一方法在光电对抗半实物仿真系统中的应用.  相似文献   

8.
为解决分布式存储系统节点精确修复的问题,构造了一类最小存储再生编码,该编码属于最大距离可分(MDS)删除码. 利用循环矢量构造生成矩阵,将冗余数据与系统数据混合存储,编码过程中所有的运算都属于伽罗华2域. 采用该编码的存储系统,在发生单节点故障时,精确修复的最小带宽为理论最小值,在系统正常工作时,能为单用户提供最大理论值的可用带宽. 与最小存储再生码和最小带宽再生码相比,编码矩阵简单,解码计算量较小,能提供较高的可用带宽.  相似文献   

9.
针对分布式存储系统的数据可用性问题展开了深入的研究,提出了一种支持纠删码的冗余倍数估计算法,根据数据统计特征获取单个数据块最优冗余方案;并基于该算法模型设计了一种适用于分布式存储系统的数据冗余策略,旨在消耗最小的存储开销获得最优的数据可用性.在实现该数据冗余策略的过程中,为了优化理论算法模型的工程可行性,提出了基于采样计算中间经验参数的方法,有效地利用目标存储数据的统计特征降低算法的计算复杂度.仿真实验验证了这种数据冗余策略的可行性和有效性.  相似文献   

10.
针对云存储系统的扩展性和数据容错问题,设计了一种基于水平阵列纠删码的通用云存储系统方案,系统可按存储节点子集进行规模扩展;给出了一种可容3列随机删除错的数据布局方法,并利用校验数据位与信息数据位之间的对应关系,寻找到一种具有低计算复杂度的数据重构算法,提高了丢失数据的恢复性能.理论分析和原型系统测试表明,本布局方法与存储方案适合于构建对数据编译码复杂度、系统扩展性都具有较高要求的云存储系统.  相似文献   

11.
针对基于网络编码的分布式存储,研究了满足给定重建时间(即节点修复数据所耗时间)约束条件的节点数据修复问题,提出了重建时间约束下的最优节点数据修复策略,建立了该策略的优化模型并显式给出最优解.数值分析结果表明,该修复策略能在给定的重建时间阈值内最小化修复带宽,而且该修复带宽随着重建时间阈值的增加而快速下降.  相似文献   

12.
基于分布式的数字化档案管理系统研究   总被引:1,自引:0,他引:1  
该文根据当今数字化档案系统规模的不断扩大、档案资料已扩大到多媒体信息的实际,提出了建立新型的基于分布式的数字化档案管理系统的构想,并对海量档案数据存储、媒体流处理、档案访问签名等关键技术提出了具体的实现方法,同时根据分布式特点采用组件式实现系统服务功能,使系统更具扩展性和可维护性。  相似文献   

13.
针对输变电工程数据的多源、异构、迭代更新和集成应用导致需要巨大存储空间且不利于数据挖掘分析的问题,提出了一种面向输变电工程数据存储管理的分布式数据存储架构.该架构基于元数据模型对输变电工程的工程地理信息、三维设计模型和文档资料三类数据进行细化,并根据不同数据存储模式的不同,设计了一种分布式存储架构分别处理各种数据.系统实现与仿真实验结果表明,所提出的分布式存储架构在保证存储效率及数据完整性的同时,也能保证数据的安全.  相似文献   

14.
分布式存储系统的可靠性研究   总被引:2,自引:0,他引:2  
通过对分布式存储系统体系结构的研究,认为数据服务的可靠性由时间、节点失效概率密度函数、数据分离算法及存储策略这4个因素影响.在此基础上,结合可靠性理论,用概率方法构造了存储系统的可靠性模型,根据模型可以对给定系统的可靠性进行预测,并据此制定存储策略,从而将可靠性问题在系统设计阶段解决,并使数据服务的可靠性保持在较高水平.  相似文献   

15.
针对目前光场采集系统中软硬件体系结构和数据采集、存储、管理机制的不足,该文设计了一种面向大规模全景动态光场采集的分布式存储与管理系统。系统实现对复杂非规则运动的多目标进行七维光场信息实时采集和捕获,并在时间、空间、光照维度上对分布式存储的光场数据进行关联性检索和管理,该系统具有良好的可扩展性,易于采集节点等硬件设备的扩充和调整。在长时间、数据密集的分布式采集和存储实验中,该系统没有出现丢帧现象,数据库管理性能满足光场处理算法中对数据的关联性检索。  相似文献   

16.
随着视频点播技术的不断发展,视频数据呈现出爆炸式增长,对文件存储及其扩容性方面提出了苛刻的要求。该文首先简单地描述了数据存储服务集群及该集群主要采用分布式平台Ha-doop,使用ZFS动态文件系统作为后端存储文件系统。接着简单介绍了ZFS的特性,其次着重介绍ZFS在HDFS上的集成设计,最后通过相应的实现和ZFS性能比较测试,证明ZFS文件系统在视频文件存储中具有很好的应用价值。  相似文献   

17.
将基于范例的设计方法用于信息融合系统体系结构,将有助于设计方法改进.分析了数据融合树范例的基本概念及其不足之处,提出了基于数据融合树范例的信息融合系统体系结构设计方法,论述了该方法的原理,并应用此方法进行了信息融合系统的体系结构设计,包括数据融合树的设计、融合节点体系结构设计以及处理系统的体系结构设计,并在此基础上以分布式C^3I系统信息融合为背景探讨了基于数据融合树范例的体系结构设计实施方法,实践证明该方法切实可行.  相似文献   

18.
高速网络中的蠕虫能以无法预料的高速率传播,因此需要设计一个高效的自动蠕虫检测系统.利用时间戳的分布式蠕虫检测系统,使用网络延时探测网络拥塞,采用分布对等式网络共享数据.该系统中各个节点能够互连平等地工作,能同步更新各个节点信息;各个节点能够自己收集信息并进行判断;各个节点能够处理其他节点的判断结果.  相似文献   

19.
讨论了火电厂应用中分散控制系统评估的内容和一般准则,并介绍了一种评估和选型的具体方法和步骤,这对火电厂分散控制系统的工程设计有一定的参考价值。  相似文献   

设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号