虚拟计算集群资源管理和作业调度设计与实现

作     者：陶宇炜 TAO Yuwei

作者机构：常州大学信息化建设与管理处江苏常州213164 

基　　金：国家自然科学基金项目(21978026) 常州大学高等职业教育研究院重点项目(CDGZ2019001) 

出 版 物：《实验技术与管理》 (Experimental Technology and Management)

年 卷 期：2021年第38卷第9期

页      码：132-137页

摘      要：随着高性能计算需求的增加,集群的计算资源和计算能力不能满足多应用的复杂计算场景,难以应对作业高峰时的使用需求,存在资源隔离和机时闲置浪费的情况。为了解决高性能计算(HPC)集群资源管理和作业调度存在的问题,该文提出基于Docker容器的计算集群资源管理和优先级预约回填作业调度策略。根据用户提交的作业队列长度和集群虚拟资源需求变化,动态调整集群计算节点的形态,统一管理集群虚拟计算资源,定制用户作业运行环境。设计优先级预约回填作业调度策略,能够高效调度数量较大的串行和并行作业,满足集群计算资源使用的公平性,并提高其利用效率。通过与Firstfit策略和FCFS策略对比实验,该策略能有效兼顾计算集群的负载均衡,进一步提升集群作业调度的性能,满足集群的计算需求。

主 题 词：计算集群 虚拟化 资源管理 作业调度 预约回填 

学科分类：12[管理学] 1201[管理学-管理科学与工程类] 08[工学] 081201[081201] 0812[工学-测绘类] 

D　O　I：10.16791/j.cnki.sjg.2021.09.027

馆 藏 号：203105004...