| 基于Hadoop社交网络分析平台的设计与实现 |
| |
| 引用本文： | 李晓蕾. 基于Hadoop社交网络分析平台的设计与实现[J]. 计算机测量与控制, 2014, 22(12) |
| |
| 作者姓名： | 李晓蕾 |
| |
| 作者单位： | 宁波大红鹰学院信息工程学院,浙江宁波,315175 |
| |
| 摘 要： | 随着社交网络的快速发展,海量社交网络的数据挖掘成为一个重要课题;针对海量数据的社交网络分析方法进行研究,以Hadoop的分布式文件系统和Map/Reduce并行方法设计基于Hadoop的分布式数据挖掘框架,在此基础上,通过Map/Reduce的并行方法,将传统数据挖掘算法并行化,以谱聚类的并行为例,阐述转化的过程并对在大数据条件下所面临的内存不足的问题给出相应的算法优化;最后对3个不同量级的数据集进行实验,验证基于Hadoop的社交网络分析平台的框架的合理性和算法并行化的有效性。
|
| 关 键 词： | 数据挖掘 分布式计算 Hadoop社交网络 大数据 |
| 收稿时间： | 2014-04-28 |
| 修稿时间： | 2014-05-22 |
Design and implementation of the platform for social network analysis based on Hadoop |
| |
| Li Xiaolei. Design and implementation of the platform for social network analysis based on Hadoop[J]. Computer Measurement & Control, 2014, 22(12) |
| |
| Authors: | Li Xiaolei |
| |
| Affiliation: | School of Electronic and Information Ningbo Dahong ying University Ningbo |
| |
| Abstract: | |
| |
| Keywords: | data mining distributed computing Hadoop social network big data |
| 本文献已被 CNKI 万方数据 等数据库收录！ |
| 点击此处可从《计算机测量与控制》浏览原始摘要信息 |
|
点击此处可从《计算机测量与控制》下载免费的PDF全文 |
