网络光盘库模型的建立和分析*

网络存储技术的广泛应用为近线存储设备应用于海量存储系统提供了新思路,而网络光盘库正是一种利用网络存储技术的新的存储方式。研究了可以通过IP网络接入海量存储系统中的网络光盘库的排队网络模型,并对其进行了仿真模拟,为光盘库在海量存储系统中的应用、设计和性能优化提供理论方法和实验依据。     

具有二级缓存机制的光盘库系统设计和实现

本文通过分析文件缓存服务器和虚拟光盘库的技术优势,结合光盘库系统的实际应用,给出了高访问性能的光盘库系统解决方案。     

基于磁光虚拟存储系统的文件调度算法

基于光盘库的Hadoop分布式文件系统（HDFS光盘库）在单位存储成本、数据安全性、使用寿命等方面非常符合当前大数据存储要求，但是HDFS不适合存储大量小文件和实时数据读取。为了使HDFS光盘库能更好地运用到更多大数据存储场景，本文提出一种更加适合大数据存储的磁光虚拟存储系统（MOVS, Magneto-optical Virtual Storage System）。系统在HDFS光盘库与用户之间加入磁盘缓存，并在磁盘缓存内通过文件标签分类、虚拟存储、小文件合并等技术将磁盘缓存内小文件合并为适合HDFS光盘库存储的大文件，提高系统的数据传输速度。系统还使用了文件预取、缓存替换等文件调度算法对磁盘缓存内文件进行动态更新，减少用户访问HDFS光盘库次数。实验结果表明，MOVS相对HDFS光盘库在响应时间和数据传输速度方面得到很大改善。     

集群缓存服务器和光盘库的通信实现

针对光盘库文件被客户大量访问的特点，在光盘库前端加入集群代理缓存服务器。使用数据库服务器作为光盘库和缓存服务器的通信中介，选择合适的数据库软件MySQL，建立合乎要求的关联表，用MySQL自带的函数和SQL语言编写程序实现和数据库、机械手的通信。     

基于文件类型的光盘库缓存系统设计与实现

光盘库是当前海量信息存储的一种重要方式。为了降低光盘库的访问响应时间,文章在光盘库前端加入一个磁盘缓存系统。分析了光盘库访问特性,设计并实现了一个基于文件类型的副本缓存结构以及相应的缓存替换算法。这种缓存结构同传统的相比,缓存命中率有所提高,内存消耗变小了,同时大大改善了本地缓存空间的可管理性。     

基于光纤通道的扩展存储域网的解决方案

文章介绍了一种基于光纤通道的扩展存储域网的解决方案,通过网络技术和存储技术相结合,提供了大容量数据存储的方法,具有比传统的依附于服务器或者网络的存储体系更好的网络可用性、数据访问性和系统管理性。     

一种附网存储服务器NASStor

网络化存储是当今存储技术的趋势。介绍了一种附网存储服务器NASStor的设计与实现，并详细描述了它的硬件和软件系统，最后指出了NAS设备研发的重点和难点以及后续工作的重点。     

闪存打造现代数据中心

随着闪存成本的不断降低,闪存在企业的应用得到迅猛增长,这不仅使得线性性能和高速应用、服务器和网络更加紧密,也为虚拟化和云计算环境带来了关键效益,如低延迟和快速响应、持续且扩展的性能、低成本和低TCO等。随着闪存的大规模应用,应用基础设施也逐渐在演变,经历了从以大型机为中心的数据中心到以服务器为中心的数据中心,进一步到云使能的数据中心三个阶段。与此同时,以大型机为中心的数据中心存在磁带孤岛的问题,数据访问速度只能达到秒级;以服务器为中心的数据中心通过旋转磁盘实现了网络存储,需要数毫秒才能成功进行数据访问;云使能的数据中心使用的是闪存存     

网络光盘存储设备

现在企业网中,很多数据都是存放在各种 ＣＤ／ＶＣＤ／ＤＶＤ光盘上,但在实际情况中又不可能每位用户都购买同一张光盘。因此涉及到多媒体光盘和资料光盘的存放和网络共享问题。许多企业通常的解决方案都是采用光盘库,首先对光盘存储产品的种类作一个简单的介绍： ＳＣＳＩ光盘库（ＳＣＳＩ ＣＤ Ｔｏｗｅｒ） 常称为第一代光盘库,结构为８、１６、２８、 ６４光驱阵列库,体积庞大,光盘库必须通过ＳＣＳＩ总线连接服务器,用户访问光盘必须经服务器,因此对服务器要求较高,速度慢且不支持并发用户同时访问,光驱速度慢易损坏。除极特…     

基于集群规模调整的节能存储策略

根据谷歌数据中心研究报告,传统数据中心存在高能耗、低利用率的问题。通过研究集群数据块访问规律,提出一种基于集群规模调整的Hadoop分布式文件系统（HDFS）节能存储策略,实现HDFS高效节能存储。策略主要在集群区域划分、数据块迁移策略优化、缓存机制等方面作出了改进。实验结果表明：使用该节能策略的HDFS比传统HDFS节能35%~40%,其中0.3%的访问需要唤醒服务器,同时引入缓存策略对集群的性能提高了5.1%。     

基于光盘库的VOD系统的研究与设计

大规模多媒体点播系统需要海量的存储空间,采用层次化存储结构是一个合理的方案。文章给出了视频点播层次化存储系统的结构,针对光盘库的特性,提出了一种基于光盘库的二级库调度与接纳算法及相应的缓冲磁盘管理方法。并给出了一种二级库系统驱动器的配置。     

基于Hadoop平台的分布式重删存储系统

针对数据中心存在大量数据冗余的问题,特别是备份数据造成的存储容量浪费,提出一种基于Hadoop平台的分布式重复数据删除解决方案。该方案通过检测并消除特定数据集内的冗余数据,来显著降低数据存储容量,优化存储空间利用率。利用Hadoop大数据处理平台下的分布式文件系统(HDFS)和非关系型数据库HBase两种数据管理模式,设计并实现一种可扩展分布式重删存储系统。其中,MapReduce并行编程框架实现分布式并行重删处理,HDFS负责重删后的数据存储,在HBase数据库中构建索引表,实现高效数据块索引查询。最后,利用虚拟机镜像文件数据集对系统进行了测试,基于Hadoop平台的分布式重删系统能在保证高重删率的同时,具有高吞吐率和良好的可扩展性。     

基于IP SAN的高校数据中心网络存储系统设计

网络存储技术是当前存储应用的发展趋势,IP SAN是其中的热点之一,如何构建网络存储系统直接关系到校园网络的安全性。介绍了SAN、ISCSI协议及其工作原理,结合高校数据中心存储的需求分析,提出了一种基于ISCSI协议的经济实用、高性价比的高校数据中心网络存储设计方案。     

无线射频识别技术在再生纺化纤行业物流配送中心的应用

通过对再生纺化纤行业中的龙头企业“宁波大发化纤有限公司”厂内物流配送中心的需求研究,提出了一个基于无线射频技术的信息系统解决方案。探讨了一个将高频和超高频RFID设备规划于同一配送中心管理系统之中,通过解决不同设备间相互“串读”的问题,使其分别读取电子标签数据信息并承担相应配送环节的数据采集任务的方法。提出了为实现过滤不同类型的标签,在标签的数据块中设置标志符来加以区分的新方法。最终实现完全基于RFID技术的完整的配送中心试点系统。     

基于网络光盘库的Cache替换算法

Cache作为提高访问效率、改善系统性能的重要环节和技术，广泛地应用于各种计算、匹配场合中。除了在处理器上使用之外，在Web访问及存储系统中，为了提高访问速度，Cache也扮演了重要的角色。该文分析了当前应用于处理器、Web Cache等方面的替换算法，针对网络光盘库这个存储系统的自身特点，提出了一种新的替换算法。该算法结合了LFU和MQ这两种算法的特点，提高了数据在Cache中的命中率。实验表明替换算法与访问模型密切相关。     

NAS存储系统性能测评方法研究

基于文件级共享存取的NAS存储系统已被广泛使用,但随着数据量的急剧增长,存储系统规模迅速扩大,其性能问题也因此日趋严重,对其评测也变得非常复杂,目前还未形成对NAS存储系统性能评测的有效标准方案.因此,用户在选购存储产品时没有参考标准和方法,极大地影响了用户的数据中心建设规划;同时,测评技术的落后也制约了存储技术的发展.为了解决这些问题,通过对NAS存储系统性能影响因素等的大量研究,制定了一套包括测评指标和测评方法等内容在内的性能测评方案,并通过测试实验展示了对NAS存储系统性能测评的方法和性能分析.本测评方案为用户提供了可行的技术参考方法,解决了目前存储测评技术发展的主要问题.     

基于云存储的重复数据删除架构的研究与设计

随着云计算的发展,云存储技术通过集群应用、虚拟化技术、分布式文件系统等功能将网络中大量各种不同类型的存储设备集合起来协同工作,缓解了老式数据中心的存储压力.另外,重复数据删除技术是一种缩减存储空间减少网络传输量的技术,随着云的广泛应用也势必会发展应用于云存储中.这两种技术结合将会给IT存储业带来实际效益.本文通过研究重复数据删除技术、云存储技术,设计了基于云存储的重复数据删除架构,提出了一种用In-line方式在客户端进行数据块级与字节级相结合的重复数据删除操作后再将数据存入云中的方案.在本架构下,海量数据存储在HDFS中;而文件数据块的哈希值存储在HBase中.     

云计算环境下的分布存储关键技术

云计算作为下一代计算模式,在科学计算和商业计算领域均发挥着重要作用,受到当前学术界和企业界的广泛关注.云计算环境下的分布存储主要研究数据在数据中心上的组织和管理,作为云计算环境的核心基础设施,数据中心通常由百万级以上节点组成,存储其上的数据规模往往达到PB级甚至EB级,导致数据失效成为一种常态行为,极大地限制了云计算的应用和推广,增加了云计算的成本.因此,提高可扩展性和容错性、降低成本,成为云计算环境下分布存储研究的若干关键技术.针对如何提高存储的可扩展性、容错性以及降低存储的能耗等目标,从数据中心网络的设计、数据的存储组织方式等方面对当前分布存储的关键技术进行了综述.首先,介绍并对比了当前典型的数据中心网络结构的优缺点;其次,介绍并对比了当前常用的两种分布存储容错技术,即基于复制的容错技术和基于纠删码的容错技术;第三,介绍了当前典型的分布存储节能技术,并分析了各项技术的优缺点;最后指出了当前技术面临的主要挑战和下一步研究的方向.     

基于模糊推理信息融合的Ad Hoc入侵检测

在分析入侵检测系统和模糊技术的基础上,研究一种基于模糊推理信息融合的Ad Hoc入侵检测系统模型,将模糊系统较高的准确性、明确的针对性、较好的适应性运用于入侵检测系统,克服目前入侵检测系统存在的效率低、灵活性和升级能力有限等缺陷,提高整个系统的安全性和可用性。该文在分析模糊入侵检测系统的基础上对不同簇首信息进行融合,通过模糊技术作出最终的决策,通过融合中心进行入侵状态估计、态势估计、威胁估计。