FlatLFS:一种面向海量小文件处理优化的轻量级文件系统

摘要：

海量小文件的高效存储和访问是当前分布式文件系统面临的主要挑战之一.以GFS和HDFS为代表的分布式文件系统大多面向海量大文件的高效存储和访问设计,缺乏小文件处理的针对性优化,导致访问海量小文件时效率低下.针对分布式文件系统中海量小文件访问时的数据服务器优化问题,提出了一种采用扁平式数据存储方法的轻量级文件系统FlatLFS,取代传统文件系统对上层分布式文件系统提供数据存储和访问支持,提高了数据服务器处理小数据块时的Ⅰ/O性能,从而提升了整个分布式文件系统的性能.实验表明,当数据块大小设定为1M时,FlatLFS的随机读性能分别比ext3、ext4、reiserfs高135％、112％和122％.

关键词：分布式文件系统、海量小文件、ext文件系统、云计算

所属期刊栏目：35

分类号：TP333;TP316.4(计算技术、计算机技术)

资助基金：国家核高基重大专项2012zx01040001

在线出版日期：2013-07-03（万方平台首次上网日期，不代表论文的发表时间）

页数：共7页

页码：120-126