首页 | 本学科首页   官方微博 | 高级检索  
相似文献
 共查询到20条相似文献,搜索用时 343 毫秒
1.
基于策略的信息生命周期管理对于存储和数据的高效使用至关重要,数据分类和策略管理的方便性以及策略执行的高性能成为该领域的突出问题.T-Archive是一个基于分级存储系统架构的策略控制的生命周期管理系统.该系统提供数据分类、策略定制管理、数据自动迁移以及客户端和应用对数据的完全透明访问.实验结果表明,迁移文件的透明访问机制对系统性能影响很小,极大地减少了客户端的管理开销,增强了系统的可扩展性.研究了策略管理在策略缓存方面的性能,使其能够很好地适应大规模的文件系统.  相似文献   

2.
提出了一种分散式体系结构的高可靠文件存储系统(DHAFS),各个存储节点相互协作,将本地的存储资源虚拟化为一个全局的存储空间,实现统一的文件名字空间,向客户端提供文件接口,存储、缓存、数据/元数据的管理功能分布在各个存储节点中.相对于现有的集群存储系统而言,DHAFS一方面弥补了单一元数据节点的单点失效,另一方面消除了单一元数据节点的性能瓶颈,提高了系统的动态可扩展性.测试实验结果证明DHAFS能够高效、稳定地提供文件存储服务.  相似文献   

3.
缪嘉嘉  付印金  毛捍东 《计算机科学》2016,43(Z11):575-577, 596
随着信息化进程的不断推进,生产系统积累了大量的数据,形成了归档需求;与此同时,数据信息类型不断丰富,非结构化数据的处理是挖掘数据价值的关键。设计并实现了KingCloud智能对象归档系统,通过文档分类技术实现了文本文件的分类,并提供了文档逻辑视图;利用图像识别、视频关键帧提取等技术实现图片和视频文件的内容元数据获取,在整体存储结构上结合文件系统语义研究对文件预取、存储缓存、数据布局和策略感知等方面进行优化,能够对数据进行智能的分类、归纳总结、智能的发现和预测及智能的分析,有效提升了存储系统的服务能力、服务质量和服务性能。  相似文献   

4.
基于Hadoop分布式文件系统(HDFS)研发的海量小文件系统(SMDFS)遗留了HDFS不兼容可移植操作系统接口(POSIX)约束的问题,为解决SMDFS的这一问题,提出基于本地缓存的POSIX兼容技术和基于数据暂存区的元数据高效管理技术。首先,通过设置数据暂存区来实现读写模式文件流的重定向,然后建立异步线程池模型,实现数据暂存区镜像文件的同步,从而完成用户层到存储层的所有POSIX相关的文件操作。此外,借助跳表结构的元数据缓存实现List目录等元数据操作效率优化。测试表明,相较于HDFS的Linux客户端,基于技术成果实现的SMDFS3.0的随机读性能有10倍以上的性能提升,顺序读和顺序写性能有约3~4倍的提升,随机写性能可以达到本地文件系统的20%,基于目录的元数据缓存的设计使目录的List操作效率提升近10倍。但是,由于用户空间文件系统(FUSE)挂载的客户端会引入额外的内核态和用户态切换等带来的开销,因此SMDFS3.0的Linux客户端相对于系统的Java接口会有大约50%的性能损耗。  相似文献   

5.
黄华  张建刚  许鲁 《计算机科学》2005,32(9):243-245
在蓝鲸分布式文件系统中,客户端的所有元数据操作都是通过远程过程调用由元数据服务器完成,所有数据读写都是直接与存储服务器交换完成的.由于通信延迟,在客户端进行频繁数据读写时,元数据信息交换影响了整个系统的性能.我们设计了一种在客户端尽量缓存文件元数据信息的模型,有效地减少了元数据通信,缩短了整个读写过程的延迟,极大地提高了蓝鲸分布式文件系统的性能.  相似文献   

6.
数据网格中一种基于副本和缓存的元数据管理系统   总被引:3,自引:0,他引:3  
元数据管理是数据网格的关键技术之一.对全局分布式存储系统GDSS(global distributed storage system)中的元数据管理进行了改进,提出了一种基于副本和缓存的分布式元数据管理系统RCMMS(replication and cache based distributed metadata management system),缓存设置在GDSS系统中的存储服务点SSP(storage senice point)端.还讨论了RCMMS的设计、实现以及测试.RCMMS提供了动态管理元数据副本的有效算法.分析和测试表明,副本结合缓存的元数据管理方案在性能上超过了GDSS现有的元数据管理系统,有着较好的可靠性.  相似文献   

7.
时间序列数据在能源、制造、金融、气候等领域有着广泛应用,聚合查询是相关分析场景中常见的查询需求,快速获取海量数据的概要信息,对于提高数据分析工作的效率具有重要意义.通过存储元数据加速聚合查询是一种有效的提升聚合查询执行效率的手段,但现有的时间序列数据库都使用时间窗口切分数据,需要对数据进行实时排序和分区,难以适应物联网场景下高并发、大吞吐量的数据写入特点.因此,提出了一种面向聚合查询的ApacheIoTDB物理元数据管理方案.该方案按照数据文件的物理存储特性切分数据,并结合同步计算和异步计算策略,优先保证数据的写入性能.针对时间序列数据中普遍存在的乱序数据,将时间范围重叠的一组文件抽象为乱序文件组并提供元数据,聚合查询会被重写为3个结合物理元数据和原始数据的子查询高效执行.多个数据集上的实验验证了该方案对聚合查询执行效率的提升效果以及不同计算策略对性能的影响.  相似文献   

8.
针对广域网高延迟、低带宽的特性给广域文件系统访问带来的性能影响问题,提出了一种不依赖于底层文件系统、能够加速广域文件系统读写访问的缓存策略.该策略支持基于区间粒度的文件数据缓存及访问,并支持元数据本地缓存;该策略提供基于阈值的容量管理功能,采用超时与最终一致相结合的方式维护缓存的一致性.最后使用典型的文件I/O基准测试工具和元数据性能测试工具对该缓存策略进行了评测,实验结果表明:该缓存策略减少了客户端与服务器的交互次数,给广域文件系统的数据访问带来了明显的性能提升,当缓存命中时其数据的读写性能与本地文件系统相近.  相似文献   

9.
性能是云应用的重要指标,云应用与现有应用在数据存储与管理方式和访问模式等方面存在较大差异,这使得传统的缓存管理算法难以适应云应用的要求。针对云应用的特性,设计了基于影响因子的缓存策略,亦即将元数据和数据缓存分开管理,使用影响因子综合管理影响缓存被再次访问的几率的多种因素,区别创建、打开、读取和修改等操作对缓存再次访问的几率的影响;设计了缓存关联管理策略,即利用元数据和数据之间的关联提高缓存管理的性能;设计了缓存主动调度策略,即通过主动淘汰较低影响因子的缓存项和动态调整元数据与数据缓存的大小来提高缓存子系统的适应能力和性能。最后实现了原型系统,并使用Filebench和Postmark进行了测试和分析,验证了面向云应用缓存子系统原型能提高1%~120%的I/O性能以及2%~87%的操作处理速度。  相似文献   

10.
基于分级缓存加速的高可靠高速星载固存设计   总被引:1,自引:0,他引:1       下载免费PDF全文
星上模块在模式切换过程会因为星载固态存储器启动过程缓慢而导致无法快速访问固存。分级缓存系统设计采用片内缓存结合小容量非易失存储器(MRAM)的硬件架构,通过在MRAM中存储文件对象头索引以及Nand Flash块元数据区索引等流程优化来加速文件系统启动操作。本设计通过数据建模和仿真实验来分析性能,并在硬件板卡上进行算法实现和测试验证,以对象为索引的启动方式耗时3.12 ms,以块元数据区为依据的启动方式耗时143.47 ms。对比传统设计架构下的耗时170.35s的启动操作,基于分级缓存加速的系统具有高可靠性同时大大缩短了固存启动时间。其系统性能提升为卫星在轨管控优化提供技术基础。  相似文献   

11.
需求管理是整个软件工程管理的基础,也是决定一个软件项目成败的关键。本文论述了软件项目中需求管理的重要性及存在的问题,并针对这些问题提出相关解决方法。  相似文献   

12.
PDM中的产品结构与配置管理   总被引:1,自引:0,他引:1  
该文介绍了产品数据管理PDM系统的概念及其基本功能,重点阐述了PDM系统中的产品结构与配置管理。  相似文献   

13.
知识管理与知识管理系统   总被引:2,自引:1,他引:2  
胡国忠 《现代计算机》2005,19(12):50-53
知识管理系统是目前一门较为新兴的学科.本文着重介绍了知识管理的概念及其在企业中所发挥的作用,对系统的体系结构、功能模块、系统管理等进行了初步探讨,对知识管理的过程和目前知识管理的相关技术进行了说明,并对知识管理系统的发展提出了几点初步的设想.  相似文献   

14.
软件工程化管理中的风险管理   总被引:1,自引:0,他引:1  
软件项目的风险管理是软件项目管理的重要内容。文章论述了风险管理的主要过程,比较了几种经典的风险管理模型,针对需求风险类型,提出原型法的解决方案,最后提出了一种实用的项目风险管理方法。  相似文献   

15.
随着航天技术的迅速发展,卫星网络的研究已成为热点.扩展了网络管理的传统功能域,定义了适用于卫星网的资源管理和任务管理内容,并在多元化网络管理协议的基础上,设计了资源管理与任务管理的实现方式,通过灵活的调度算法对任务进行有效调度,可以最大限度的利用网络资源,提高了用户对卫星网络的使用效率.  相似文献   

16.
17.
比较了数据和模式,数据管理和模式管理之间的关系,阐述了模式管理的重要性及模式管理的组成,最后讨论了模式管理在各行业中的应用。  相似文献   

18.
简要介绍了销售管理系统的涵义和结构,并讨论报价管理系统的定义和作用。以销售管理系统报价管理子系统的开发为背景.论述了整个系统的开发过程,系统的可行性分析、结构和基本设计。全文共分为引言、系统规划与分析、系统设计、系统实施与运行、结束语五部分。该论文在应用程序的编制中采用了VisualBasic6.0,文中介绍了VisualBasic6.0的特点。最后还对管理信息系统的发展趋势进行了分析和展望。  相似文献   

19.
This paper discusses how the adoption of a systematic risk management framework can enhance disaster management. In the analysis of risk, a focus on the interactions between sources of risk and elements at risk, rather than a pre-occupation with hazards, adds more value to management. Vulnerability is the crucial modifier of consequences and, as such, its analysis highlights critical areas and opportunities for developing effective intervention strategies. Risk communication processes based on community involvement need to underpin the development and application of evaluation criteria to determine which risk treatments will be implemented. Closing considerations reflect on how risk management may be used within public administration to re-define emergency management service provision. The paper concludes that Emergency Risk Management provides a framework which, by focusing on managing community exposure to major risks, facilitates the identification and implementation of intervention options which address socially significant problems.  相似文献   

20.
简要介绍了销售管理系统的涵义和结构,并讨论报价管理系统的定义和作用。以销售管理系统报价管理子系统的开发为背景,论述了整个系统的开发过程,系统的可行性分析、结构和基本设计。全文共分为引言、系统规划与分析、系统设计、系统实施与运行、结束语五部分。该论文在应用程序的编制中采用了VisualBasic6.0,文中介绍了VisualBasic6.0的特点。最后还对管理信息系统的发展趋势进行了分析和展望。  相似文献   

设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号