| 基于Hadoop分布式文件系统的单点问题的研究 |
| |
| 引用本文： | 宋继红,李梦楠,郝得智. 基于Hadoop分布式文件系统的单点问题的研究[J]. 软件工程师, 2014, 0(12) |
| |
| 作者姓名： | 宋继红 李梦楠 郝得智 |
| |
| 作者单位： | 沈阳工业大学,辽宁 沈阳,110870 |
| |
| 摘 要： | 从Hadoop分布式文件系统的架构出发,对Name Node节点存在的单点问题进行了分析与研究。在这个前提下,针对单点内存瓶颈问题,提出了一个小文件归并算法。此算法以Hadoop为基础,利用Hadoop分布式文件系统的特点,将归并后生成的大文件序列化到Hadoop分布式文件系统,很好地解决了小文件过多时Name Node单点内存瓶颈问题,并提高了系统的性能和可靠性。
|
| 关 键 词： | Hadoop 小文件归并 分布式文件系统 |
Research on Problems of Single Point Based on Hadoop Distributed File System |
| |
| SONG Jihong,LI Mengnan,HAO Dezhi. Research on Problems of Single Point Based on Hadoop Distributed File System[J]. Software Engineer, 2014, 0(12) |
| |
| Authors: | SONG Jihong LI Mengnan HAO Dezhi |
| |
| Abstract: | |
| |
| Keywords: | hadoop small files merging distributed file system |
| 本文献已被 万方数据 等数据库收录！ |
|
