面向高性能计算环境的作业优化调度模型的设计与实现

摘要：

高性能计算环境聚合了多个分布在不同地域、不同组织机构的高性能计算资源,面向用户提供统一的访问入口和使用方式,由系统中间件根据用户作业请求匹配合适的高性能计算资源.随着环境应用编程接口的开放以及作业请求数量的大幅增加,面对高并发作业提交请求时,目前采用的即时调度模型会由于网络等原因导致一定数量的请求处理失败,同时缺乏灵活性.针对此问题,优化了环境作业调度模型,引入作业环境队列,细化了作业系统层状态,增加了作业调度策略可配置性,并基于环境中间件SCE实现了系统原型.经测试,在单核心服务每分钟处理近200个作业提交请求的工作负载下,无因系统和网络原因引起的作业提交出错现象;在共计1 000个作业中,近500个作业提交命令请求在0.3s以内完成,800余个作业提交命令请求在0.5s以内完成.

关键词：中国国家网格、高性能计算环境、网格计算、云服务、作业调度

所属期刊栏目：39

分类号：TP311.1(计算技术、计算机技术)

资助基金：国家重点研发计划项目2016YFB0201404;十二五863重大项目2014AA01A302

在线出版日期：2017-05-23（万方平台首次上网日期，不代表论文的发表时间）

页数：共8页

页码：619-626