| 基于Hadoop框架的MapReduce计算模式的优化设计 |
| |
| 引用本文： | 孙彦超,王兴芬. 基于Hadoop框架的MapReduce计算模式的优化设计[J]. 计算机科学, 2014, 41(Z2) |
| |
| 作者姓名： | 孙彦超 王兴芬 |
| |
| 作者单位： | 北京信息科技大学 北京100192 |
| |
| 摘 要： | 对某高校教学资源平台的海量日志进行了分析,将传统单机分析处理模式,转变为Hadoop框架下的MapReduce分布式处理模式。MapReduce采用分而治之的思想,很好地解决了单机对海量数据处理产生的瓶颈问题。通过分析Hadoop源码的使用,认真研究MapReduce对海量数据处理作业流程分析,提出了MapReduce分布式作业计算的优化策略,从而更好地提高了海量数据的处理效率。
|
| 关 键 词： | Hadoop 海量数据 MapReduce 分布式计算 |
MapReduce Designed to Optimize Computing Model Based on Hadoop Framework |
| |
| SUN Yan-chao,WANG Xing-fen. MapReduce Designed to Optimize Computing Model Based on Hadoop Framework[J]. Computer Science, 2014, 41(Z2) |
| |
| Authors: | SUN Yan-chao WANG Xing-fen |
| |
| Abstract: | |
| |
| Keywords: | Hadoop Massive data MapReduce Distributed computing |
| 本文献已被 CNKI 万方数据 等数据库收录！ |
|
