面向混合负载的集群资源弹性调度

摘要：

针对目前集群资源调度方法难以适应互联网业务多样化、定制化特征的问题,提出了一种面向混合负载的集群资源弹性调度方法.该方法通过构建作业约束描述语言,允许作业基于自身负载特征提出多维度的资源申请和具有负载意识的资源调度算法,实现在同一集群内各类业务统一部署与管理,及时匹配资源需求的变化;通过建立作业的软约束与硬约束之间的转化机制,满足作业在不同执行阶段对资源的定制化需求.实验表明,该方法相比于Hadoop,可允许作业利用较少资源获得更优性能,在实际生产系统中,基于该方法可将集群资源利用率由62％提升到75％.

关键词：集群资源调度、作业约束调度、负载感知、混合负载、互联网数据中心(IDC)

所属期刊栏目：24

分类号：TP1;O22

资助基金：国家自然科学基金61070028;863计划2012AA01A401;中国科学院先导专项XDA06030200

在线出版日期：2014-11-18（万方平台首次上网日期，不代表论文的发表时间）

页数：共9页

页码：782-790