| 基于Hadoop的小文件分布式存储技术研究 |
| |
| 引用本文： | 袁晓春.基于Hadoop的小文件分布式存储技术研究[J].机电工程技术,2014(12). |
| |
| 作者姓名： | 袁晓春 |
| |
| 作者单位： | 广东电网有限责任公司惠州供电局,广东惠州,516001 |
| |
| 摘 要： | HDFS （Hadoop Distributed File System）以其高容错性、高伸缩性等优点，允许用户将Hadoop部署在低廉的硬件上，广泛适用于大文件存储。然而对于海量小文件，因为内存开销过高，因此对数据的存储技术提出了更高的要求。基于Hadoop分布式文件系统(HDFS)架构，研究小文件在Hadoop架构下的数据处理策略，通过实验将其与传统的文件系统的读写、计算速度进行比较。
|
| 关 键 词： | 分布式存储 HDFS MapReduce |
Research on Storage of Hadoop Distributed Small File System |
| |
| YUAN Xiao-chun.Research on Storage of Hadoop Distributed Small File System[J].Mechanical & Electrical Engineering Technology,2014(12). |
| |
| Authors: | YUAN Xiao-chun |
| |
| Abstract: | |
| |
| Keywords: | distributed storage HDFS MapReduce |
|
