|
|||||
|
|
| 基于开源Hadoop的矢量空间数据分布式处理研究 | |
| 引用本文： | 尹芳,冯敏,诸云强,刘睿.基于开源Hadoop的矢量空间数据分布式处理研究[J].计算机工程与应用,2013(16). |
| 作者姓名： | 尹芳 冯敏 诸云强 刘睿 |
| 作者单位： | 1. 长安大学 地球科学与资源学院,西安,710054 2. 中国科学院地理科学与资源研究所,北京,100101 3. 重庆师范大学地理科学学院,重庆,400047 |
| 基金项目： | 国家自然科学基金(No.41101364)；中国科学院地理科学与资源研究所“一三五”战略科技计划项目(No.2012ZD010)。 |
| 摘 要： | 为实现大规模矢量数据的高性能处理，在开源项目Hadoop基础上，设计与开发了一个基于MapReduce的矢量数据分布式计算系统。根据矢量空间数据的特点，通过分析Key/Value数据模型及GeoJSON地理数据编码格式，构建了可存储于Hadoop hdfs的矢量数据Key/Value文本文件格式；探讨矢量数据的MapReduce计算过程，对Map数据分片、并行处理过程及Reduce结果合并等关键步骤进行了详细阐述；基于上述技术，建立了矢量数据分布式计算原型系统，详细介绍系统组成，并将其应用于处理关中地区1∶10万土地利用矢量空间数据，取得较好效果。 |
| 关 键 词： | 矢量空间数据 Key/Value GeoJSON Apache Hadoop MapReduce 分布式处理 |
Research on vector spatial data distributed computing using Hadoop projects |
|
| YIN Fang , FENG Min , ZHU Yunqiang , LIU Rui.Research on vector spatial data distributed computing using Hadoop projects[J].Computer Engineering and Applications,2013(16). | |
| Authors: | YIN Fang FENG Min ZHU Yunqiang LIU Rui |
| Abstract: | |
| Keywords: | vector spatial data Key/Value GeoJSON Apache Hadoop MapReduce distributed computing |
| 本文献已被 万方数据 等数据库收录！ | |