基于并行计算的海量日志分析系统实现 |
| |
引用本文: | 白超,杨静,吴建国.基于并行计算的海量日志分析系统实现[J].微机发展,2013(7):80-83. |
| |
作者姓名: | 白超 杨静 吴建国 |
| |
作者单位: | 安徽大学;解放军电子工程学院计算机系 |
| |
基金项目: | 安徽省科技攻关项目(07010200057) |
| |
摘 要: | 通过深入研究日志的类型和特点,设计并实现了一套基于并行计算的海量日志文件分析系统。该系统采用集群方式并行地收集日志文件,采用分布式文件系统存储,最终利用并行计算对日志进行分析处理。该系统实现了日志采集、分析的完全自动化处理,在系统部署之后能够有效地进行系统安全的维护、系统性能的优化、系统故障的排查。该系统结合云计算提高了日志分析的效率,解决了海量日志处理过程中存在的问题,为海量日志分析提供了一个完整有效的解决方案。
|
关 键 词: | 分布式计算 分布式文件系统 云计算 日志处理 |
本文献已被 CNKI 等数据库收录! |
|