分布式文件系统元数据服务的负载均衡框架

刘杰叶丹孙耀钟华

中国科学院软件研究所;

摘要：

请求负载均衡,是分布式文件系统元数据管理需要面对的核心问题.以最大化元数据服务器集群吞吐量为目标,在已有元数据管理层之上设计实现了一种分布式缓存框架,专门管理热点元数据,均衡不断变化的负载.与已有的元数据负载均衡架构相比,这种两层的负载均衡架构灵活度更高,对负载的感知能力更强,并且避免了热点元数据重新分布、迁移引起的元数据命名空间结构被破坏的情况.经观察分析,元数据尺寸小、数量大,预取错误元数据带来的代价远远小于预取错误数据带来的代价.针对元数据的以上鲜明特点,提出一种元数据预取策略和基于预取机制的元数据缓存替换算法,加强了上述分布式缓存层的性能,这种两层的元数据负载均衡框架同时考虑了缓存一致性的问题…展开v

关键词：元数据服务器、分布式文件系统、负载均衡、预取、缓存

所属期刊栏目：27

分类号：TP316(计算技术、计算机技术)

资助基金：国家自然科学基金61170074,61202065,U1435220;国家高技术研究发展计划8632013AA041301;国家科技支撑计划2015BAH18F02National Natural Science Foundation of China61170074,61202065,U1435220;National High-Tech R&D Program of China 8632013AA041301;National Key Technology Research and Development Program of the Ministry of Science and Technology of China2015BAH18F02

在线出版日期：2017-01-06（万方平台首次上网日期，不代表论文的发表时间）

页数：共16页

页码：3192-3207