共查询到20条相似文献,搜索用时 250 毫秒
1.
2.
3.
Hadoop平台在云计算中的应用 总被引:4,自引:0,他引:4
云计算是当前比较热门的新兴技术之一,受到业界的广泛关注。Hadoop是一个可实现大规模分布式计算的开源软件平台,因此被广泛应用在云计算领域。本文在对Hadoop的主要组件Hadoop分布式文件系统HDFS(Hadoop Distributed File System)和计算模型MapReduce进行深入分析和研究的基础上,建立基于Hadoop平台的云计算模型,通过实验证明该模型可以有效完成分布式数据处理任务。 相似文献
4.
李娜 《电脑编程技巧与维护》2016,(7):63-65
针对Hadoop分布式文件系统(Hadoop Distributed File System,HDFS)在存储海量数据时对小文件支持性能低下的问题,提出了基于HDFS的通用文件存储系统(Common File Storage-Hadoop Distributed File System,CFSHDFS)。该方案采用了分类处理的设计思想,区别对待大文件和小文件。对大文件不做任何处理,按照HDFS原有的流程完成既定的操作;对小文件的存取,经过缓存、预读、合并等机制的处理,从而在提高Namenode内存利用率和Datanode空间利用率的基础上,提高了小文件的读写性能。区别对待文件的处理以及对小文件的一系列的处理,对用户来说都是透明的,因此,该方案并不会增加用户使用HDFS的复杂性。 相似文献
5.
欧阳昕 《数字社区&智能家居》2012,(6X):4360-4362
该文介绍了云计算的概念和云计算系统的组成结构,并阐述了作为云计算技术核心的虚拟化技术、高速存储技术和分布式计算技术的实现和发展现状。 相似文献
6.
朱巧生 《计算机研究与发展》1982,(1)
本文将以微处理机通用数据文件管理系统《ZDFMS》(Z-80 Data File Mana-gement System)为基础,探讨文件管理系统的一些问题。 相似文献
7.
云计算和云存储技术的发展为实现海量数据的存储提供了有效的途径。本文以云计算技术下计算机网络安全存储技术为出发点,指出目前计算机网络安全存储的影响因素,并对云计算技术在计算机网络安全存储中的应用进行研究,从而提高计算机网络的存储安全性,确保用户数据信息的安全。 相似文献
8.
9.
易灿 《电子制作.电脑维护与应用》2014,(9)
随着现代信息技术的快速发展,众多领域都开始注重计算机技术的使用,云计算作为下一代计算模式,尤其是在科学计算和商业计算领域引起了更多的关注,文章从云计算环境下的分布存储技术现状出发,对分布存储技术的结构及相关的关键技术进行了较为详细的分析与研究。 相似文献
10.
Windows操作试题的实时自动评判技术 总被引:7,自引:0,他引:7
讨论了一种利用Windows文件系统变化通知(Windows File System Notification)实现Windows操作试题时自动评判的技术。 相似文献
11.
12.
13.
14.
近年来,计算机科学技术快速发展,在人们的生活、工作和学习中发挥着越来越重要的作用。计算机互联网的信息资源非常丰富,与此同时碎片化、海量的数据信息在很大程度上增加了人们获取有价值信息的成本和时间。当前云计算平台下的Web数据挖掘技术为海量数据信息的处理和分析提供了极大的便利,通过研究云计算平台下的Web数据挖掘,进一步完善和优化Web结构数据挖掘技术,降低大量数据信息存储和处理的成本,提高系统运行效率。本文简要介绍了云计算和Web数据挖掘,阐述了云计算平台下的Web数据挖掘系统。 相似文献
15.
云计算环境下的数据存储 总被引:1,自引:0,他引:1
该文对云计算环境下的数据存储技术进行了分析。对云计算下的存储需求,云计算IAAS层的云存储架构方法.PAAS层的云存储实现方法进行了探讨。分析比较了几种商业化云存储系统,并给出了企业环境下构建云存储的一种方案。 相似文献
16.
云存储系统作为云计算的重要组成部分,是各种云计算服务的基础。但随云存储系统规模的不断扩大和在设计时对能耗因素的忽略,使其日益暴露出高能耗、低效率的问题。因为云存储系统占整个云计算中心能耗的27%~40%,所以无论从降低服务提供商的运营成本,还是从降低能耗以保护环境的角度出发,研究云存储系统中的节能技术都具有很大的现实意义与应用前景。将存储系统中的能耗优化问题分为基于硬件的节能方法与基于调度的节能方法两大类进行讨论;并将基于调度的节能方法分为基于节点调度、基于数据调度和基于缓存预取技术3类进行综合比较;最后,对适应节能的云存储体系结构、节能模式下的QoS保证、节能模式与计算模式的匹配以及纠删码容错技术下的节能研究4个方向进行了展望。 相似文献
17.
为解决传统电力系统中集中式计算平台海量数据流的存储和分析功能不足的问题,针对云计算在智能电网调度技术中的应用进行了研究。首先,对云计算技术在IT行业的发展进行阐述,对云计算的关键技术从虚拟化与快速部署技术、大规模分布式存储技术、资源调度技术、大规模多租户技术、海量数据处理技术以及大规模信息通信技术等方面出发进行介绍。其次,借鉴IT行业云计算技术,设计了基于云计算的智能电网计算平台以及基于云计算的智能电网互动式节能优化调度架构,以期推动云计算在电力系统中的发展,解决智能电网互动式节能优化调度算法方面的问题。 相似文献
18.
基于服务器集群的云检索系统的研究与示范 总被引:1,自引:0,他引:1
在研究云计算及移动搜索引擎的基础上,依据当前技术发展,提出了基于服务器集群的云检索系统模型,该模型由云信息层、云检索集群系统和用户查询框组成.对云检索集群系统中数据存储技术进行了深入研究,提出了分布式云检索数据存储方案.为了提高云检索执行效率,提出了以程序流为核心的云检索软件执行模式.该模型的测试结果表明,系统功能能正确实现,性能表现较好且稳定.通过该模型的示范,给海量信息检索技术提供了拓展思维的方案. 相似文献
19.
云计算技术作为一种新兴的技术,能够提供海量信息的高速处理和安全存储,云计算技术的发展为CSCL系统的建设提供了新的思路。提出了一种面向PAAS模式的CSCL系统。该系统以微软Windows Azure云平台为依托、利用SQL Azure数据库进行数据存储,实现了异质群组、协同工作流等技术,是对云环境下构建CSCL系统的有益探索,此开发模式能减少开发和维护成本。试用表明,该CSCL系统能有效地支持协作学习的开展。 相似文献
20.
云计算技术在应用开发界引发了巨大的变化。从目前最领先的云计算技术入手,以云输入为例,研究输入法的联想实现,首次实现基于云计算的维吾尔文云输入法,弥补了该领域的空缺。在输入法的设计和实现过程中引入Ajax技术,Ja-vaScript技术和XML数据库技术来解决相关数据的访问、存储和处理问题。 相似文献