| 基于hadoop云平台的智能电网MapReduce数据计算技术研究 |
| |
| 引用本文： | 孟祥萍,周来.基于hadoop云平台的智能电网MapReduce数据计算技术研究[J].电测与仪表,2015,52(10). |
| |
| 作者姓名： | 孟祥萍 周来 |
| |
| 作者单位： | 1. 长春工程学院电气与信息工程学院，长春130012; 吉林省配电自动化工程研究中心，长春130012
2. 东北电力大学信息工程学院,吉林吉林,132012 |
| |
| 基金项目： | 吉林省教育厅项目(2014317、2014309)；吉林省科技厅科技发展计划项目(20130206049GX)；吉林省发改委项目(2013118831)；长春市科技局项目 |
| |
| 摘 要： | 为应对未来智能电网海量数据信息带来的实时计算、分析等难题,文章首先在Hadoop云计算平台基础上搭建MapReduce框架,论证了其良好的数据计算性能,并通过实验发现MapReduce在进一步提高计算效率方面的诸多问题——任务调度不均、数据偏移、异构环境下适应性差等。随后考虑MapReduce原始调度方式的弊端并给出均衡数据映射、评估节点性能的MapReduce架构改进方案,并提出了动态匹配的调度算法(DMSA——Dynamic Matching Scheduling Algorithm),最后通过在仿真平台上的集群实验,减少了系统计算资源的消耗,缩短了运行时间,显著地提高了集群性能,同时增强了数据本地性,证明了该策略提高MapReduce计算效率的可行性。
|
| 关 键 词： | 智能电网 数据计算 hadoop mapreduce |
| 收稿时间： | 2014/7/27 0:00:00 |
| 修稿时间： | 2014/7/27 0:00:00 |
Research on Data Computing Technologies of MapReduce for Smart Grid |
| |
| mengxiangping and ZHOU Lai.Research on Data Computing Technologies of MapReduce for Smart Grid[J].Electrical Measurement & Instrumentation,2015,52(10). |
| |
| Authors: | mengxiangping and ZHOU Lai |
| |
| Affiliation: | Institute of Electrical and Information Engineering,Changchun Institute of Technology,School of Information Engineering,Northeast Dianli University |
| |
| Abstract: | |
| |
| Keywords: | smart grid data computing hadoop Mapreduce |
| 本文献已被 CNKI 万方数据 等数据库收录！ |
| 点击此处可从《电测与仪表》浏览原始摘要信息 |
|
点击此处可从《电测与仪表》下载全文 |
