一种不依赖访问热度信息的分布式文件放置算法

摘要：

文件放置问题一直是分布式存储领域的研究热点.分布式文件存储系统HDFS随机选择节点完成文件放置,存在访问负载分布不均衡的缺点.研究人员提出大量基于文件访问热度信息的放置算法;但是,文件的访问热度信息是动态变化的,难以准确预测.提出一种不依赖访问热度信息的分布式文件放置算法;该算法仅使用文件的创建时间信息,利用文件已创建时间与访问热度之间的相关性,首先将时间进行区间划分,然后统计出各节点在不同时间区间内所创建文件的数据量,放置过程中保持同一时间区间的数据量在不同节点间大致相同.实验结果表明,该算法不仅可以使各节点的存储负载达到均衡,还能够提升访问负载的均衡,消除因文件访问热度不均而导致的性能瓶颈.

关键词：分布式文件存储系统、文件访问热度、文件放置、负载均衡

所属期刊栏目：18

分类号：TP311.12(计算技术、计算机技术)

资助基金：西安科技大学博士启动基金2015QDJ031;陕西省教育厅专项科学研究计划项目15JK1468

在线出版日期：2018-03-15（万方平台首次上网日期，不代表论文的发表时间）

页数：共5页

页码：285-289