SMDFS分布式海量小文件系统的大空间聚合存储技术

SMDFS分布式海量小文件系统的大空间聚合存储技术.pdf
海量小文件聚合存储技术大多以目录或逻辑目录为单位,将小文件聚合为实际存储的大文件并建立小文件的元数据信息,实现小文件的快速访问.传统小文件聚合存储技术读写操作性能受目录结构的影响差别较大.在现有研究成果的基础上,分析不同目录结构聚合空间的特征,提出大空间聚合存储技术和元数据分裂技术,为不同目录结构的海量小文件存储提供通用的解决方法,并基于开源分布式文件系统HDFS实现了一个分布式海量小文件系统SMDFS.测试表明,大空间聚合技术能有效支持不同目录结构的海量小文件数据,相较于SMDFS早期版本,小文件数据装载和访问性能均有很大程度的提高.
作者：严巍巍何连跃李三霞成颖佼
作者单位：国防科学技术大学计算机学院长沙410073
母体文献：NCIS2015第21届全国信息存储技术学术会议论文集
会议名称：NCIS2015第21届全国信息存储技术学术会议  
会议时间：2015年9月17日
会议地点：长沙
主办单位：中国计算机学会
语种：chi
分类号：
关键词：海量小文件系统  聚合存储  分布式元数据管理  目录结构
在线出版日期：2017年10月24日
基金项目：
相似文献
相关博文

SMDFS分布式海量小文件系统的大空间聚合存储技术.pdf

文件大小:

1.7 MB

高速下载