首页 | 本学科首页   官方微博 | 高级检索  
     

安全管理平台中基于云计算的日志分析系统设计
引用本文:陈洁,于永刚,刘明恒,潘盛合,徐克付.安全管理平台中基于云计算的日志分析系统设计[J].计算机工程,2015(2):21-25.
作者姓名:陈洁  于永刚  刘明恒  潘盛合  徐克付
作者单位:1. 中国移动 深圳 有限公司,广东 深圳,518048
2. 中国科学院信息工程研究所,北京,100093
基金项目:国家自然科学基金资助项目(61003295)。
摘    要:安全管理平台(SMP)是实现安全管理工作常态化运行的技术支撑平台,在实际应用中需要实时处理来自安全设备所产生的海量日志信息。为解决现有SMP中海量日志查询效率低下的问题,设计基于云计算的SMP日志存储分析系统。基于Hive的任务转化模式,利用Hadoop架构的分布式文件系统和MapReduce并行编程模型,实现海量SMP日志的有效存储与查询。实验结果表明,与基于关系数据的多表关联查询方法相比,该系统使得SMP日志的平均查询效率提高约90%,并能加快SMP集中管控的整体响应速度。

关 键 词:安全管理平台  云计算  Hadoop架构  海量日志  并行处理

Design of Log Analysis System Based on Cloud Computing in Security Management Platform
CHEN Jie,YU Yonggang,LIU Mingheng,PAN Shenghe,XU Kefu.Design of Log Analysis System Based on Cloud Computing in Security Management Platform[J].Computer Engineering,2015(2):21-25.
Authors:CHEN Jie  YU Yonggang  LIU Mingheng  PAN Shenghe  XU Kefu
Affiliation:CHEN Jie;YU Yonggang;LIU Mingheng;PAN Shenghe;XU Kefu;China Mobile( Shenzhen) Co. ,Ltd.;Institute of Information Engineering,Chinese Academy of Sciences;
Abstract:
Keywords:Security Management Platform ( SMP )  cloud computing  Hadoop architecture  massive log  parallel processing
本文献已被 CNKI 万方数据 等数据库收录!
设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号