Share Nothing分布式气象数据存储处理系统的设计与实现 |
| |
引用本文: | 陈利娟,唐婕,薛帅宁,赵思亮,钟美,何奇.Share Nothing分布式气象数据存储处理系统的设计与实现[J].自动化与仪器仪表,2023(1):198-201. |
| |
作者姓名: | 陈利娟 唐婕 薛帅宁 赵思亮 钟美 何奇 |
| |
作者单位: | 1. 重庆市气象信息与技术保障中心;2. 长寿区气象局 |
| |
摘 要: | 随着气象观测、预报和服务业务的快速发展,气象资料的种类和数据量日益增多,数据写入频率越来越高,对气象数据存储处理系统提出极大挑战,进一步提升CIMISS数据管理和服务能力的需求变得日益迫切。为解决存储处理系统动态扩展能力不足、吞吐与并行计算效率低下的问题,采用一系列Share Nothing分布式集群设计,包括Share Nothing分布式架构、分布式数据库、NAS存储技术等搭建可动态扩展的Share Nothing分布式气象数据存储处理系统。实践证明,该方案设计能够满足当今气象结构化数据和非结构化数据对存储能力、并发响应能力的需求,通过动态扩展可便捷适应未来气象业务发展对数据存储和应用等服务能力不断增加的需求,具备气象现代发展进程中气象数据存储处理系统高吞吐量、可动态横向扩展、高稳定性、高可靠性的特性。
|
关 键 词: | 分布式架构 分布式数据库 扩展性 可靠性 吞吐量 |
|
|