云环境下的时空数据小文件存储策略

编号 zgly0000889626

文献类型 期刊论文

文献题名 云环境下的时空数据小文件存储策略

作者 熊炼  徐正全  王涛  顾鑫 

作者单位 武汉大学测绘遥感信息工程国家重点实验室 

母体文献 武汉大学学报;信息科学版 

年卷期 2014(10)

页码 1252-1256

年份 2014 

关键词 云存储  小文件  时空数据  特征提取  模板匹配 

文摘内容 云环境下的网络应用中存在着海量的时空数据小文件,针对HDFS处理小文件效率不高的问题,提出了一种结合用户访问规律与数据自身属性的数据处理方案。该方案将用户访问转化为数据请求序列,根据数据的时空属性提取并构建特征序列,通过模板匹配找到用户在不同访问模式下的特征模板,发现模板内文件之间的访问相关性,合并相关文件。实验结果表明,该方案有效地提高了系统对小文件的存储读取效率,减小了网络应用的响应时间。