磁光阵列:一种新型数据存储模式的实现

介绍了一种磁盘与光盘融合数据安全存储的新模式,简称磁光阵列或ORAID（Optical Replicated Arrays of Independent Disks）。ORAID模式包括:将数据同时存储到磁盘模块和光盘模块中;可根据数据的属性信息从磁盘模块中读取数据,在目标磁盘无法被读取时,可根据数据在光盘模块中对应的位置信息,将存储有目标数据的光盘中的数据读入预设的数据缓冲区;将存储有目标磁盘数据的光盘中的数据存储到磁盘模块中更换后的新磁盘中。该模式在使用上像基于硬盘的系统一样方便,读写性能与RAID（Redundant Arrays of Independent Disks）一样;在数据安全方面,无论前端硬盘如何损坏数据都不会丢失,并且在硬盘坏损以及重建过程中保持数据的可提供性;ORAID具有物理层面上的合规性,所存的数据不可更改（WORM,Write Once Read Only）并可在无迁移的情况下长期保存50年以上;ORAID无须额外的备份系统。磁光阵列模式同样适用于固态硬盘与光盘的融合。     

RAID5下做系统Ghost备份

RAID5不对存储的数据进行备份,而是把数据和相对应的奇偶校验信息存储到组成RAID5的各个磁盘上,并且奇偶校验信息和相对应的数据分别存储于不同的磁盘上。当RAID5的一个磁盘数据发生损坏后,利用剩下的数据和相应的奇偶校验信息去恢复被损坏的数据。     

数字视频监控系统中数据的存储算法

目前视频监控系统在多路存储情况下大多采用轮巡式,该存储方式效率低下,而且存在因硬盘剩余空间不足而造成的存储异常中断等问题.文中结合实际视频监控系统,讨论了视频数据的存储算法,采用多磁盘调度算法实现了将多路存储"平均"分配于多个硬盘中,充分提高存储访问的效率;并且设计实现了定时检测增加磁盘当前剩余空间算法,保证磁盘剩余空间始终维持在一定的容量,从而很好地解决了存储异常中断的问题.     

NAS的逆袭

当IT网络系统发展到一定规模后,计算机设备上的单一磁盘就很难适应数据存储的需求,出现了容量的限制、速度的限制、访问带宽的限制。于是,存储控制器应运而生,它采用了独立处理芯片来处理、协调多块磁盘之间的访问和数据读写组合;更进一步地,将计算机技术和存储控制器进一步整合,就有了存储阵列     

基于LSM树的在线监测数据安全存储系统设计

水电厂在线监测数据对于水电厂设备维护方案的制定和实施具有重要的参考作用,一旦泄露或者丢失,造成的损失将是巨大的。为了保证监测数据的安全性,设计基于日志结构合并树(Log-Structured Merge-Tree,LSM树)的水电厂在线监测数据安全存储系统。该系统由硬件接口层、数据传输层以、数据存储层以及安全功能模块层四部分组成。以LSM树为基础设计数据存储模型,当RAM中的存储量达到限值后,将水电厂在线监测数据从微处理器中的内部存储器RAM转移到后者外部磁盘当中,完成数据存储。为存储模型设置三个安全防护模块,在实现数据存储的同时,保证数据的安全性。结果表明,四个磁盘的写入数据大小始终维持在100 kB以上,磁盘存储空间利用率高于90%,由此说明该系统的存储性能较为优越;检测灵敏度系数在1.0以上,密文的敏感度在10以下,说明水电厂在线监测数据安全性较高,实现了安全存储。     

视频监控中多磁盘存储调度算法的研究

在视频监控应用系统中,视频信息存储需要大量磁盘存储空间,需要采用设计合适的机制进行视频信息的存储调度,既可以进行多路同时存储又保证存储效率。提出了基于磁盘剩余空间和被访问频度的多磁盘存储调度算法以及定时检测增加磁盘剩余空间的算法。     

以固态硬盘为缓存的存储技术研究

在传统数据存储技术的基础上提出以固态硬盘为缓存的存储技术,结合固态硬盘的写缩减技术,实现热点数据与冷数据在内存‐固态硬盘‐机械磁盘之间的分级缓存与存储机制,从而能充分利用内存资源,增强与CPU 的数据交互能力,进而有效提升大数据环境下的数据处理速度。     

数字视频存储的优化策略

存储是播出/媒体资产管理设施建立的基础.归档和提取服务是建立在存储基础上的框架.随着技术的进步,磁盘和磁带容量不断增加,速度不断提高,而成本则不断降低.在未来很多年内,视频存储体系结构将维持现状:视频服务器的磁盘数字磁带库归档存储;磁盘和数据磁带存储将是归档存储解决方案的基础.     

快闪存储器──存储器家族的新成员

磁盘和快闪存储器有一个共同的特点，即整块数据存储。计算机通常采用磁盘存储整块数据，而快闪存储器在数据存储方面更具有优越性。我们研究了快闪存储单元及其工作原理，从中了解到快闪存储器的特性以及与便携式计算机比较的结果。     

快闪存储器—存储器家族的新成员

磁盘和快闪存储器有一个共同的特点，即整块数据存储。计算机通常采用磁盘存储整块数据，而快闪存储器在数据存储方面更具有优越性。我们研究了快闪存储单元及其工作原理，从中了解到快闪存储器的特性以及与便携式计算机比较的结果。     

利用空闲空间抗两个磁盘失效的RAID5阵列算法

传统的RAID5阵列存储算法只能保证一个磁盘失效的时候重建数据,本文设计了一种新的RAID5阵列算法,包括储存算法和重建算法,使得在磁盘在使用少于一半空间的情况下,即使有两块磁盘失效,也可以重建数据,即抗2个磁盘失效失效,而当使用大于一半空间的时候,恢复使用传统算法进行存储重建。比较于传统算法,新的算法使RAID5阵列的可容忍磁盘失效数量提高50%,可容忍失效的已存储数据块量提高25%,磁盘空间利用率提高25%。     

利用空闲空间抗两个磁盘失效的RAID5阵列算法

传统的RAID5阵列存储算法只能保证一个磁盘失效的时候重建数据,本文设计了一种新的RAID5阵列算法,包括储存算法和重建算法,使得在磁盘在使用少于一半空间的情况下,即使有两块磁盘失效,也可以重建数据,即抗2个磁盘失效失效,而当使用大于一半空间的时候,恢复使用传统算法进行存储重建。比较于传统算法,新的算法使RAID5阵列的可容忍磁盘失效数量提高50％,可容忍失效的己存储数据块量提高25％,磁盘空间利用率提高25％。     

1981年的光存储

到1981年春天,光学数据存储系统将在三大洲发展。文件存储早已从档案室存储发展到缩微胶卷存储。现在,它在转动的光盘上找到一个新的家——一种兼备家庭娱乐电视唱片和计算机存储磁盘功能的工具。激光二极管将起了“写”和“读”的双重作用。为什么光学数据存储在这个领域经过多年的发展后最近才成为现实?1970年以前,大量的由数字、统计表和方程式组成的存储信息是以数字代码形式记录在磁盘上的。这一时期是数字形式的数据存储(计算机的数据存储)的发展时期。70年代中期,提出了存储手稿的某一段落、某些字母、某一页甚至整篇文章的要求及文字处理工作,因此需要更新磁盘——一种低容量的廉价塑料磁盘。     

电视台制播网存储方案的选择

随着IT存储与网络技术飞速发展,视频制播系统中的设备网络化、数字化已普及,磁盘存储技术在视频制播系统中大量应用,存储设备作为各种数据的载体成为视频制播系统的核心设备,分析比较DAS等数据存储方式,为广播电视台搭建制播网络系统提供参考。     

浪潮存储：中小企业市场再添强将

近日,浪潮公司推出了一款面向中小企业的大容量、高可靠Ultra320SCSI磁盘/主机通道产品——浪潮英信NS3550存储系统。此系列产品在系统性能、稳定性和数据安全等方面都具有较为优秀的设计,是目前浪潮存储产品线中面向中小企业市场的强力产品。最新推出的浪潮英信NS3550存储系统提供12个盘位,可灵活调整为机架式或者塔式结构,单机容量可达3.6TB。该产品内部采用无线缆连接,有效消除传统线缆连接的信号传输串扰问题;拥有2个Ultra320主机通道和2个Ultra320磁盘通道,极大地提高了整个存储阵列的数据传输速度;其专用ASIC芯片为磁盘冗余校…     

一种新的云存储数据容错存储方式检验方法

云存储中,防止数据丢失的关键是实现文件容错。然而,云存储服务商可能没有提供承诺的容错水平,导致用户蒙受数据丢失和经济损失的双重风险。现有云存储数据容错存储方式检验方法存在服务器预读取欺骗攻击,并且效率低、实用性差,不能达到在一定概率范围内,快速、轻量级地检测出犯规的服务器行为的要求。针对上述问题,该文利用磁盘顺序存取和随机存取的差异性设计了一种远程数据容错存储方式检验方法 随机与顺序访问时间差异化(DRST)方法,其原理是文件块被分散地放在不同磁盘上,读取一个磁盘上顺序存储的文件块比随机读取不同磁盘上的文件块所需的响应时间短。最后,对所提方法进行了严格的理论证明和深入的性能分析,结果表明,所提方法能够快速检验出服务器是否为用户提供了其承诺的容错水平,并且比现有方案更安全,更高效。     

BC-BSP:一个基于BSP的高可扩展并行迭代图处理系统

提出了一个基于整体同步并行计算(BSP)模型的、具有磁盘暂存功能的大规模图处理系统——BC-BSP。该系统通过提供应用程序接口(API)实现系统配置和有关策略的可扩展性,通过优化的图数据磁盘存储实现了数据处理规模的高可扩展性以及高性能的容错方案,并且可以处理普通数据集的聚类和分类等需要迭代计算的数据挖掘算法。通过实验验证了该系统的可扩展性,其在真实数据集上性能优于Giraph1.0.0,在模拟数据集上稍逊于Giraph的内存版。     

磁盘阵列上虚拟磁盘的管理

随着计算机技术的发展,数据量急速增如,数据管理成为一个研究热点。磁盘阵列的出现极大地改善了数据管理的性能。在使用磁盘阵列时,往往把它划分为多个逻辑磁盘,磁盘的大小不能改变。这种方法降低了磁盘空间的利用效率。为了解决这个问题,可以把磁盘阵列划分为一个或多个共享存储池。每个共享存储池管理多个虚拟磁盘。这些虚拟磁盘共同使用共享存储池的磁盘空间。为了协调多个虚拟磁盘同时向共享存储池读写数据的问题,设计了一个调度算法。使用这种方法,实现了对磁盘阵列的有效管理。     

VBR视频的平滑检索算法

集VBR视频平滑技术和MZ磁盘安置技术于一体,综合优化磁盘I/O带宽、内存及磁盘存储空间需求,提出极小化缓冲代价、极小化峰值数据磁盘检索时间和最大磁盘空间利用率的平滑检索算法,及相应的视频对象存储模式.实验结果说明了算法的有效性.     

基于ASPI架构的高速数据存储系统设计

本文设计了一种基于SCSI接口磁盘的高速数据存储系统.系统采用ASPI函数实现了SCSI设备驱动程序的开发,简化了开发过程.使用两块SCSI磁盘组成RAIDO阵,充分利用SCCI磁盘线性存储的特点,发挥了磁盘的速度优势.系统在实际工作中持续存储带宽能够稳定在IOOMB/s,达到了预期要求,证明了设计原理是正确的.