首页 | 本学科首页   官方微博 | 高级检索  
相似文献
 共查询到18条相似文献,搜索用时 140 毫秒
1.
针对当前集群文件系统只支持静态扩展、不提供高可用性等问题,提出一种基于全局哈希表的动态扩展协议-GHT.利用该协议实现一种支持节点动态扩展的集群文件系统HANDY,重点阐述了协议的设计、算法和理论分析.实验数据证明.HANDY集群文件系统具有良好的动态扩展性和可用性,减小系统的管理和维护开销.  相似文献   

2.
文章描述了WanLan集群视频服务器上的集群流媒体文件系统(MFS)的设计与实现。MFS是一种支持MPEG文件格式的分布式流媒体文件系统,它由MFS的客户端、管理节点、数据节点以及元数据服务节点组成。MFS流媒体集群文件系统实现了单一系统的逻辑映像、数据和元数据的高可用以及系统自动配置。  相似文献   

3.
文件系统的元数据主要是用来描述它的命名空间,访问权限和数据定位等信息的数据。由于50%~80%的文件系统访问要涉及到元数据,元数据服务的性能将极大地影响整个分布式文件系统的性能。为此,文章重点讨论元数据管理面临的问题,从元数据服务的高可扩展技术、高性能技术和高可用技术三个主要方向进行综述,重点分析了各自的主要问题以及目前发展起来的一些主流技术,同时对未来分布式文件系统的元数据管理一些值得关注的问题进行了梳理和展望,为相关研究提供一定的参考。  相似文献   

4.
并行文件系统集中式元数据管理高可用系统设计   总被引:4,自引:0,他引:4       下载免费PDF全文
本文针对并行文件系统集中式元数据管理存在单一失效点的问题,设计了一种双元服务器高可用系统。通过元数据镜像生成冗余副本,保证了元数据的可靠性;通过故障屏蔽,实现了对客户端的连续服务。所有功能都是用内核模块来实现,因此对用户是完全透明的。最后,本文阐述了各个模块的实现,并对该系统进行了可靠性分析。  相似文献   

5.
大规模集群文件系统LCFS的元数据管理与访问机制   总被引:2,自引:0,他引:2  
文件系统的元数据包括文件基本属性信息和目录结构信息。在基于集群技术的大规模文件系统中,有效的元数据管理是系统实现的核心。本文在设计了与元数据管理相关的三类协议的基础上,提出了集群化的元数据服务器实现模型,并分析和比较了各种实现方式的优缺点。  相似文献   

6.
一种新的文件系统元数据的检查点容错策略   总被引:1,自引:2,他引:1  
秦航  徐婕 《计算机工程与设计》2004,25(3):334-336,373
针对目前在集群文件系统中出现的元数据的故障问题,在PVFS的基础上提出了一种新的元数据检查点的日志管理策略。该策略在Linux环境下实现,解决了文件系统中较慢的元数据管理这一瓶颈问题,并且具备了较强的容错功能。该方法采用磁盘日志和内存日志的结构,通过对事务的管理,能满足集群文件系统中元数据高可用性的要求。  相似文献   

7.
传统的文件系统管理工具通过实时遍历文件目录树获取文件元数据信息,以实现管理监视功能。但对于大型文件系统,元数据信息的获取需要耗费大量时间,传统管理工具无法适应当前大数据背景下的管理需求。为此,基于数据库技术设计一种新的文件系统管理工具。该工具集成Robinhood策略引擎与TORQUE作业管理系统,通过分布式并行计算获取文件系统元数据信息,并将信息保存到MySQL数据库,同时基于数据库中的元数据信息,实现文件系统的监视、管理和备份功能。实验结果表明,采用分布式并行计算能够充分利用集群的计算资源,提高文件系统的遍历速率,保证文件系统监视、管理和备份的顺利进行。  相似文献   

8.
随着存储数据的爆炸性增长和集群技术的快速发展,集群文件系统的研究越来越成为一个焦点,该文设计并实现了一个多级集群文件系统(MCFS)的全局命名空间,MCFS系统采用元数据分层管理思想,建立一个统一的元数据树,从而使整个系统运行在一个松耦合、异构的环境下实现全局命名空间,提高了系统的并行性和可扩展性。在介绍了MCFS命名空间管理的同时,进行了相应的试验测试和性能分析。  相似文献   

9.
在集群文件系统中,元数据服务器是整个系统正常运转的核心,它的可靠性和性能是设计系统时需要着重考虑的问题之一.本文设计了一个具有高可靠性、高性能的两级元数据服务器系统,兼顾了集中式元数据管理和分布式元数据管理的优点.系统中高级元数据服务器负责维护文件系统全局的目录结构和管理整个文件系统的命名空间,双元数据服务器负责维护文件元数据的分布信息,并采用了马尔可夫回报模型对两级元数据服务器系统进行了可靠性分析.实验数据表明,具有两级元数据服务器的集群文件系统能提供高吞吐量.  相似文献   

10.
蓝鲸分布式文件系统元数据服务   总被引:3,自引:1,他引:2       下载免费PDF全文
文件系统元数据请求占据了所有请求50%以上的比例,文件系统元数据服务对整个文件系统有着重要的影响。该文介绍了蓝鲸分布式文件系统的元数据服务器集群(BWMMS)的设计方法。BWMMS通过高扩展的系统结构和简单灵活的元数据请求处理协议,完成元数据服务的协同处理过程。初步评估表明,BWMMS的元数据管理机制能够提供较好的元数据处理性能,具有较高的扩展能力。  相似文献   

11.
对于低成本的嵌入式平台,内存和芯片的性能都是有限的。为了减少多媒体播放列表对资源的占用,文中基于FAT文件系统的特点,提出了一种新的嵌入式多媒体播放列表的解决方案。该方案创新主要体现在两个方面:用文件起始簇号代替文件路径;不缓存文件信息,实时获取文件信息。该方案和传统方案相比具有内存使用大幅减少,响应速度快的特点。在实际的产品中实现了该播放列表方案,测试结果显示播放列表资源占用大幅降低,运行性能良好,能有效地降低产品的成本。  相似文献   

12.
基于高速通信协议的COSMOS机群文件系统性能研究   总被引:4,自引:0,他引:4  
作为曙光3000超级服务器的重要组成部分,COSMOS机群文件系统对机群文件系统协议,结构及性能优化等问题进行全面深入的探讨,首先描述了基于曙光3000机群高速通协议BCL-3的COSMOS文件系统的实现,然后引入并发带宽利用率,描述了通信与I/O对机群文件系统性能影响程序,最后介绍了有关性能实验并对实验结果作出解释。  相似文献   

13.
丁凯  高扬 《计算机工程与设计》2004,25(10):1778-1780
传统的分布式文件系统无法为集群系统提供严格的单一映像功能(SSI),使得集群系统的管理较为复杂。基于Linux的集群文件系统CSFS(Cluster Single File System),提供单一映像功能,有效地解决了这一问题。通过对Linux虚拟文件系统(VFS)特点的分析,在VFS上添加文件系统CSFS,提高了集群系统的可用性和可管理性。  相似文献   

14.
介绍了大学计算机基础课程中操作系统功能这一章节的三个教学案例。在进程管理的教学中,借用医生给病人看病的例子介绍为何引入进程、进程的概念以及进程调度是如何进行的。在文件系统管理中,澄清了一些容易混淆的概念,对分区、分区格式化、文件系统及簇的概念作了介绍,并介绍了如何设定簇的大小。最后介绍了虚拟存储器的概念及虚拟存储器太小时的解决办法。  相似文献   

15.
针对大规模网络环境下的文件上传接收服务系统的需求,设计了一个集群架构的文件接收服务系统,采用多台接收服务器来实现文件接收服务,提高了系统的稳定性和可用性。根据文件传输的特点,综合考虑文件流量负载情况和服务器当前负载情况,提出了一个综合负载统计的负载均衡算法,测试结果表明基于该算法的文件接收集群系统具有较好的负载均衡效果。设计并实现了文件上传接收服务系统的负载均衡引擎,解决了系统的负载失衡问题,提高了系统的运行效率。  相似文献   

16.
高性能计算系统需要一个可靠高效的并行文件系统.Lustre集群文件系统是典型的基于对象存储的集群文件系统,它适合大数据量聚合I/O操作.大文件I/O操作能够达到很高的带宽,但是小文件I/O性能低下.针对导致Lustre的设计中不利于小文件I/O操作的两个方面,提出了Filter Cache方法.在Lustre的OST组件中设计一个存放小文件I/O数据的Cache,让OST端的小文件I/O操作异步进行,以此来减少用户感知的小文件I/O操作完成的时间,提高小文件I/O操作的性能.  相似文献   

17.
杨德明 《计算机应用》2012,32(9):2500-2503
针对来自客观设备失败和主观数据破坏,提出一种数据快速恢复方案。当文件系统未损坏或损坏不严重时,只选取文件分配表(FAT)表项中有价值的内容实现数据快速还原;如果破坏严重(或出于计算机取证需要),则可以从整个物理硬盘的所有空间(包括操作系统中不可见区域)里最大限度提取出用户的有效数据信息。根据FAT32文件系统中数据存储与删除机理,通过扫描FAT表中未分配空间,以文件头部特征码所在扇区的簇号和残存目录项中文件大小两个参数确定文件的存储空间进而恢复;探讨了复合文档结构,给出了根据文档存储规范和数据流标识提取有效信息方法。实验表明,该方案可以简单、高效地恢复被删除的数据。  相似文献   

18.
NTFS系统存储介质上文件操作痕迹分析   总被引:1,自引:0,他引:1  
黄步根 《计算机工程》2007,33(23):281-283
计算机用户通过文件系统存取数据,文件和文件夹的操作(如增加、删除、修改)会在存储介质上留下痕迹,这些痕迹与文件系统有关。NTFS文件系统以簇为单位分配和回收外存空间,通过主文件表来进行管理。文章从计算机取证角度探讨NTFS文件系统下访问文件(夹)的方法,研究NTFS文件系统下文件和文件夹的操作痕迹,并与FAT文件系统中的痕迹进行比较。  相似文献   

设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号