| 基于Hadoop的流量日志分析 |
| |
| 引用本文： | 韩雨轩,温秀梅. 基于Hadoop的流量日志分析[J]. 河北建筑工程学院学报, 2020, 38(2): 122-125. DOI: 10.3969/j.issn.1008-4185.2020.02.027 |
| |
| 作者姓名： | 韩雨轩 温秀梅 |
| |
| 作者单位： | 河北建筑工程学院,河北 张家口 075000,河北建筑工程学院,河北 张家口 075000 |
| |
| 摘 要： | 以电信类公司日志文件为分析模板,结合大数据技术,对流量日志的数据进行分析,获取用户的行为特征,明确网站改进方向,为电信类公司本身的业务提出合理化建议,实现数据的最大价值化。整体架构以Hadoop3.1为基础,搭建分布式数据存储分析的大数据平台,结合Sqoop、MySQL、Flume等,实现日志数据分析的架构设计,数据结果最终通过Sqoop工具由HDFS导入到MySQL数据库存储,并对结果进行分析,为完善系统提出改进方案。
|
| 关 键 词： | Hadoop分布式文件系统 流量日志 数据分析 |
Analysis of Ttraffic Log based on Hadoop |
| |
| HAN Yu-xuan,WEN Xiu-mei. Analysis of Ttraffic Log based on Hadoop[J]. Journal of Hebei Institute of Architectural Engineering, 2020, 38(2): 122-125. DOI: 10.3969/j.issn.1008-4185.2020.02.027 |
| |
| Authors: | HAN Yu-xuan WEN Xiu-mei |
| |
| Abstract: | |
| |
| Keywords: | |
| 本文献已被 CNKI 万方数据 等数据库收录！ |
|
