| 基于MapReduce模型的分布式天文交叉证认* |
| |
| 引用本文： | 赵青,孙济洲,肖健,于策,崔辰州,刘旭,袁鳌.基于MapReduce模型的分布式天文交叉证认*[J].计算机应用研究,2010,27(9):3322-3325. |
| |
| 作者姓名： | 赵青 孙济洲 肖健 于策 崔辰州 刘旭 袁鳌 |
| |
| 作者单位： | 1. 天津大学,计算机科学与技术学院,天津,300072
2. 中国科学院,国家天文台,北京,100012 |
| |
| 基金项目： | 国家自然科学基金资助项目（10978016）；天津自然科学基金资助项目（08JCZDJC19700）；天津市科技支撑重点项目（09ZCKFGX00400） |
| |
| 摘 要： | 交叉证认是实现多波段数据融合的关键技术，目前还缺乏对其分布式算法的研究。快速增长的数据规模使该问题必须要依赖分布式并行计算技术解决。提出了一种基于MapReduce分布式模型的新方法，根据Map-Reduce的要点，尽量减少了任务间的通信量，并通过合理设置划分粒度保证了效率与存储间的平衡。实验结果表明，该方法对海量数据交叉证认的效率提升明显，在大规模集群上达到了接近线性的加速比。该方法为交叉证认提供了一种快速有效的解决途径。
|
| 关 键 词： | 天文交叉证认 MapReduce 并行计算 分布式计算 |
Distributed astronomical cross-match based on MapReduce model |
| |
| ZHAO Qing,SUN Ji-zhou,XIAO Jian,YU Ce,CUI Chen-zhou,LIU Xu,YUAN Ao.Distributed astronomical cross-match based on MapReduce model[J].Application Research of Computers,2010,27(9):3322-3325. |
| |
| Authors: | ZHAO Qing SUN Ji-zhou XIAO Jian YU Ce CUI Chen-zhou LIU Xu YUAN Ao |
| |
| Affiliation: | (1. School of Computer Science & Technology, Tianjin University, Tianjin 300072, China; 2. National Astronomical Observatories, Chinese Academy of Sciences, Beijing 100012, China) |
| |
| Abstract: | |
| |
| Keywords: | astronomical cross-match MapReduce parallel computing distributed computing |
| 本文献已被 万方数据 等数据库收录！ |
| 点击此处可从《计算机应用研究》浏览原始摘要信息 |
|
点击此处可从《计算机应用研究》下载全文 |
|
