基于HBase的分布式海量小型文件存储系统

随着互联网公司的业务不断发展，企业的大量数据以非结构化的形式存在，非结构化数据常常以小型文件为主，不仅体量大，而且分散性高，因此海量小型文件存储面临着存储性能和访问效率较低等问题。分布式小型文件存储系统是指在集群服务器的硬件存储资源环境下，对小型文件保存、读取和修改进行统一管理的系统。文章基于HBase实现了一个分布式小型文件存储系统，该文件系统有超强的处理海量小型文件的能力，同时有着良好的扩展性、容错性和稳定性，可以更好地支撑互联网企业的业务发展。