虚拟计算集群资源管理和作业调度设计与实现

摘要：

随着高性能计算需求的增加,集群的计算资源和计算能力不能满足多应用的复杂计算场景,难以应对作业高峰时的使用需求,存在资源隔离和机时闲置浪费的情况.为了解决高性能计算(HPC)集群资源管理和作业调度存在的问题,该文提出基于Docker容器的计算集群资源管理和优先级预约回填作业调度策略.根据用户提交的作业队列长度和集群虚拟资源需求变化,动态调整集群计算节点的形态,统一管理集群虚拟计算资源,定制用户作业运行环境.设计优先级预约回填作业调度策略,能够高效调度数量较大的串行和并行作业,满足集群计算资源使用的公平性,并提高其利用效率.通过与Firstfit策略和FCFS策略对比实验,该策略能有效兼顾计算集群的负载均衡,进一步提升集群作业调度的性能,满足集群的计算需求.

关键词：计算集群;虚拟化;资源管理;作业调度;预约回填

所属期刊栏目：38

分类号：TP393(计算技术、计算机技术)

资助基金：国家自然科学基金项目;常州大学高等职业教育研究院重点项目

在线出版日期：2021-11-29（万方平台首次上网日期，不代表论文的发表时间）

页数：共6页

页码：132-137