VOD视频服务器上节目的存储与调用

在VOD系统中，为了满足多用户在不同时刻点播同一个视频文件，视频节目的存储需要特殊的方法。采用文件分块存储的方法来解决这一问题，分析了磁盘个数、带宽、用户数、视频流数与文件块的大小之间的关系：同时给出了视频文件分块后的存储方法以及调用视频文件时缓冲区的设计、视频文件的并发读取与重组，从而实现在不同时刻发送同一个视频节目到多个客户端。     

倒排文件页式存储方法

页是磁盘与内存进行数据交换的基本单位,它在操作系统、数据库管理系统以及倒排文件的数据组织中占据十分重要的地位。为减少倒排索引的磁盘 I/O 读写开销,提出了一种倒排文件按页存储的构建方法,实现了按页读写文件。该方法主要包括磁盘I/O层设计、页管理器设计以及堆文件管理器设计三个部分,实现了页大小可变的分块式数据文件管理,支持页内定长记录、变长记录的组装以及超长数据记录的跨页存储。经实验测试,结果表明该方法是行之有效的,可以将其应用到实际的垂直搜索引擎中。     

文件支持的Xen存储虚拟化研究

基于文件的虚拟磁盘存储是虚拟机技术实现的重要一环,为了提高虚拟机磁盘读写效率,着重研究了Xen基于文件的磁盘虚拟化,分析利用异步I/O技术提升虚拟机对虚拟磁盘的读写速度,同时阐述了不同格式的虚拟磁盘文件做为虚拟存储设备的优劣。     

贪心法在磁盘文件存储中的应用

介绍了一种运用贪心法设计磁盘文件存储方式，提高系统文件检验索效率的方法，并给出相关的程序。     

海量分级存储系统中磁带访问性能优化

磁带是顺序访问设备,其访问性能因受到多方面因素的影响而变化很大,因此进行针对性的优化非常必要;采用基于磁盘-磁带的分级存储管理是海量存储系统中最常用的技术手段之一,首先对当前磁带访问的现状和影响因素进行分析,然后对性能优化方法进行探讨,包括驱动器调度、迁移策略、文件大小、磁带文件顺序等;实验结果表明,海量分级存储系统将网络存储架构与磁带存储结合起来,具有良好性价比,在高能物理、数字媒体等领域得到广泛应用。     

基于Ceph云存储的磁盘利用率研究

云存储以其强大的容错性、部署的灵活性、可扩展性、维护的便捷性等优势,在各行业得到普遍推广和广泛应用,但是因云存储数据冗余保护的需要,高消耗是其不可避免的弊端.如何降低其磁盘空间的消耗,对云存储系统的成本优化意义重大.本文基于Ceph文件系统,研究文件和磁盘的映射关系以及数据冗余和磁盘利用率的关系,对云存储的实际生产运行有重要意义.     

一种性能优化的小文件存储访问策略的研究

在分布式文件系统中,小文件的管理一般存在访问性能较差和存储空间浪费较大等缺点.为了解决这些问题,提出了一种性能优化的小文件存储访问(SFSA)策略.SFSA将逻辑上连续的数据尽可能存储在物理磁盘的连续空间,使用Cache充当元数据服务器的角色并通过简化的文件信息节点提高Cache利用率,提高了小文件访问性能;写数据时聚合更新数据及其文件夹域中的相关数据为一次I/O请求写入,减少了文件碎片数量,提高了存储空间利用率;文件传输时利用局部性原理,提前发送批量的高访问率的小文件,降低了建立网络连接开销,提升了文件传输性能.理论分析和实验证明,SFSA的设计思想和方法能有效地优化小文件的存储访问性能.     

奇妙！虚拟、加密双剑合璧

Dekart Private Disk是一个强大，实时，易用的虚拟磁盘加密软件，可以在计算机上产生一个或几个虚拟磁盘，每个虚拟磁盘中可以存储一定的文件夹和文件，这些文件夹和文件在存储时会被自动实时加密。与一般的文件加密软件加密原理不同，Dekart Private Disk使用了美国政府标准加密算法AES和SHA-1算法技术，只有拥有正确的密码才能正常读取，凄取时自动实时解密。     

一种基于闪存的混合存储仿真系统

近年来闪存发展非常迅速,已成为一种大容量、高性能、低功耗、非易失的新型存储产品,其可以有效弥补内存和磁盘的性能差距完善存储系统。为此,设计一种基于闪存的混合存储仿真系统HybridArch,增加文件分布层,支持文件的分割、分布和文件接口访问,并实现5种混合存储体系结构,包括传统的内存-磁盘双层结构、纯闪存结构、闪存作为部分磁盘结构、塔式结构和水平缓存结构。基于HybridArch对上述混合存储体系结构进行仿真实验,分析比较其在性能和闪存写入量等方面的优劣,结果表明,水平缓存体系结构在性能、性价比、闪存设备寿命等方面综合表现较好。     

基于驱动层的数据安全存储系统设计

就目前数据集中存储带来的风险进行分析,并提出基于驱动的数据安全存储系统设计。数据安全存储系统能够在不改变终端用户操作习惯的情况下实现文件的安全存储,该系统工作在操作系统文件驱动层和设备驱动层之间,采用透明加密的方式,在文件物理写入磁盘的过程中,嵌入一系列安全操作,保证实际存储的数据全部经过保护。     

基于磁盘性能的应用程序存储设计

文章从分析影响磁盘性能的主要因素的角度出发,论述了应用程序存储设计的基本方法。通过实例分析了磁盘性能与存储设计的关系,在此基础上,论证了应用程序的存储需求分析,需要综合考虑存储容量与每秒钟输入输出操作次数这二个因素的事实。阐述影响磁盘性能的主要因素,然后分析磁盘的IOPS,最后给出了应用程序存储设计的基本方法。     

基于NoSQL的海量航空物流小文件分布式多级存储方法

为了解决航空物流领域海量小文件存储效率和访问效率不高的问题,提出一种基于Nosql的海量小文件分布式多级存储方法,充分考虑到数据的时效性、本地性、操作的并发性以及文件之间的相关性,先根据相关性将文件合并,然后采用分布式多级存储,使用内存式Redis数据库做缓存,HDFS做数据的持久化存储,其过程采用预取机制。实验结果表明,该方法有效提高了小文件的存取效率和磁盘的利用率,显著地降低了网络的带宽占用和集群NameNode的内存消耗,适合解决航空领域海量小文件存储问题。     

磁盘文件的安全删除

磁盘文件的安全删除太原理工大学郝桂芳１ＤＯＳ对磁盘文件的管理以及存储方法为了方便有效地管理、存储磁盘文件，ＤＯＳ在对磁盘进行格式化时，就将磁盘划分为４个区：引导区、文件分配表区、文件目录区、数据区。ＤＯＳ在管理和存储一个文件时，把文件分为两部分：第一...     

再谈文件分配表

随着计算机应用技术的发展,计算机存储、处理的信息量越来越大,一些大的系统软件(如WIN 95/98)、应用软件及游戏等都要占用大量的存储空间,因此,现在许多用户的微机上都配上了大容量的磁盘,而如何充分利用这些大硬盘也就成为用户十分关心的话题.下面就从文件在磁盘上的存储方式谈起,说说文件分配表对磁盘利用率的影响.文件的存储方法及FAT为了将文件存储到磁盘上,必须采取某种方法来进行磁盘空间的分配,即在磁盘的什么位置上以什么样的方式存储文件.一种比较直接的方法是在磁盘上连续地存储文件,这样只要知道了文件的起始位置就能够访问该文件的全部内容了.这种方法简单方便,但同时也会产生许多问题,其中最主要的就是所谓“磁盘碎片”问题.假设在磁盘上已存放好了两个文件,它们的位置是连续的,此时,删除第一个文件,再建立一个新文件,如果这个新     

异构存储共享系统的设计与实现

对基于SAN的异构系统间文件共享问题进行研究,采用异步I／O访问模式、缓冲I／O及双重缓冲区等优化方法,提高了系统运行性能,使得大型机与开放系统对SAN的磁盘子系统的存储共享效率更高。通过SAN连接大型机、Unix工作站、Window工作站和磁盘阵列,同时系统还提供一组文件访问API供上层应用程序调用。系统具有海量存储、高速数据存取、高可用性以及高可靠性等突出特性。     

基于磁带分级存储的文件备份系统设计与实现

随着磁盘价格的不断下降,越来越多的容灾备份系统采用将本地数据经过网络传输到服务器磁盘进行备份,但是大数据时代的来,瞄,导致存储压力越来越大。然而在庞大的数据中,有很大一部分数据活跃率并不高。设计并实现了一种基于磁带分级存储的文件备份与恢复系统,采用索引的方式记录并组织备份文件,实现增量备份;该系统将服务器端拆分为两部分,首先将文件数据备份到服务器磁盘,再根据相关时间保留策略,将活跃率较低的数据归档到脏带中。保证了大数据时代服务器磁盘的高效利用。     

基于智能网络磁盘的存储网格研究

存储网格的实现方式一直是人们关心和亟待解决的问题.在对存储网格和智能网络磁盘的概念进行叙述和分析之后,提出了基于智能网络磁盘的存储网格实现方式.通过在高速局域网上的相关实验和理论探讨,给出了存储网格的这种实现方式的优点、缺点和可行性.这种实现方式的特点是:可以用多种存储设备来构成存储网格;用户可以采用不同厂家的产品提供存储网格共享,可以提供不同的服务质量;设备之间完全独立、互不影响;可以根据存储设备提供的存储容量和存储服务质量来进行收费,对计算网格计费问题的解决提供借鉴和参考;采用松散耦合的、可动态扩展的体系结构,统一的存储空间,扩展性几乎不受任何限制.     

NAS设备的磁盘调度模型分析

附网存储 (NAS)设备的性能目标是优化网络存储数据访问和存储子系统的管理 .本文旨在显示随着磁盘转速的增加 ,NAS应该从磁盘硬件的最佳工作性能出发 ,整体配合以提高它的 I/O操作性能 .为了发掘 NAS最佳的工作性能 ,我们建立同时基于磁臂位置和旋转位置的精确的磁盘调度模型 ,并提出测量调度算法性能的方法 .以 HP975 6 0性能参数为基础 ,进行理论分析和模拟测试 .结果磁盘转速越快 ,磁盘访问的开销越大 .因此 ,NAS设备的设计必须从整体上考虑磁盘调度策略的选择 ,并行多磁盘结构的选择 ,文件 cache的分配和文件系统布局等 ,以便提高网络存储数据访问的性能     

更奇妙的加密：虚拟硬盘加密

Dekart Private Disk是一个强大、实时、易用的虚拟磁盘加密软件。可以在计算机上产生一个或几个虚拟磁盘．每个虚拟磁盘中可以存储一定的文件夹和文件。这些文件夹和文件在存储时会被自动实时加密。与一般的文件加密软件加密原理完全不同．Dekart Private Disk使用了美国政府标准加密算法．AES和SHA-1算法技术。只有拥有正确的密码才能正常读取。读取时自动实时解密。     

面向海量高清视频数据的高性能分布式存储系统

通过对视频监控数据的特点和传统存储方案进行分析,提出一种高性能分布式存储系统解决方案.不同于传统的基于文件存储的方式,设计了一种逻辑卷结构,将非结构化的视频流数据以此结构进行组织并直接写入RAW磁盘设备,解决了传统存储方案中随机磁盘读写和磁盘碎片导致存储性能下降的问题.该方案将元数据组织为两级索引结构,分别由状态管理器和存储服务器管理,极大地减少了状态管理器需要管理元数据的数量,消除了性能瓶颈,并提供精确到秒级的检索精度.此外,该方案灵活的存储服务器分组策略和组内互备关系使得存储系统具备容错能力和线性扩展能力.系统测试结果表明,该方案在成本低廉的PC服务器上实现了单台服务器能同时记录400路1080P视频流,写入速度是本地文件系统的2.5倍.