基于民航西北空管局数据平台的实时数据仓库技术选型分析

随着我国民航行业的迅速发展，空管行业产生的数据日益增加，为了应对大量数据存储并持续挖掘数据价值，各地空管系统已经开始计划建设大数据平台。作为大数据平台的重要组成部分，数据仓库在数据资产管理、统计分析等方面起到了重要作用。目前数据仓库主要针对前一天数据的统计分析（T+1）场景，提供良好的能力。随着业务指标的增多和提升，数据仓库逐渐面临实时性统计分析（T+0）的需求。随着流式计算的发展，基于Kafka、Flink等组件搭建实时数据仓库已经成为业界主流技术，业界也将发展方向聚焦在利用实时数据仓库实现批流一体化，同时应对T+0及T+1业务场景。为了满足发展需要，亟需在传统数据仓库的技术架构下探索符合空管行业的实时数仓架构，为未来的技术选型提供依据和支撑。