基于分布式的遥感数据管理系统研究与实现 |
| |
引用本文: | 赵小明,黄祥志,张丽丽,余涛.基于分布式的遥感数据管理系统研究与实现[J].电子设计工程,2023(11):1-5. |
| |
作者姓名: | 赵小明 黄祥志 张丽丽 余涛 |
| |
作者单位: | 1. 中国科学院空天信息创新研究院;2. 中国科学院大学资源与环境学院;4. 北华航天工业学院 |
| |
基金项目: | 国家自然科学基金(41907192);;民用航天技术预先研究项目(D040401); |
| |
摘 要: | 文中基于分布式系统构建了一种集存储、管理和计算为一体的多源异构遥感数据管理系统,系统使用Apache HBase存储标准化后的遥感瓦片对象;使用MongoDB存储瓦片元数据,并根据Z曲线编码进行范围分区,实现负载均衡;使用Apache Spark+GDAL进行栅格计算;利用改进的Z曲线编码进行空间查询。经过原型系统性能测试实验表明,文中查询方法在百万级数据量的窗口查询下是PostgreSQL的空间索引查询性能的4.25倍,计算时使用惰性加载图像数据的策略,计算效率相比GeoTrellis提高了18%。
|
关 键 词: | 瓦片数据 分布式存储 分布式计算 Z曲线 |
|
|