收藏本站
收藏 | 投稿 | 手机打开
二维码
手机客户端打开本文

虚拟计算集群资源管理和作业调度设计与实现

陶宇炜  
【摘要】:随着高性能计算需求的增加,集群的计算资源和计算能力不能满足多应用的复杂计算场景,难以应对作业高峰时的使用需求,存在资源隔离和机时闲置浪费的情况。为了解决高性能计算(HPC)集群资源管理和作业调度存在的问题,该文提出基于Docker容器的计算集群资源管理和优先级预约回填作业调度策略。根据用户提交的作业队列长度和集群虚拟资源需求变化,动态调整集群计算节点的形态,统一管理集群虚拟计算资源,定制用户作业运行环境。设计优先级预约回填作业调度策略,能够高效调度数量较大的串行和并行作业,满足集群计算资源使用的公平性,并提高其利用效率。通过与Firstfit策略和FCFS策略对比实验,该策略能有效兼顾计算集群的负载均衡,进一步提升集群作业调度的性能,满足集群的计算需求。

知网文化
【相似文献】
中国期刊全文数据库 前19条
1 许美玲;乔莹;莫毓昌;钟发荣;;基于二元决策图的集群计算系统性能分析[J];计算机应用;2017年02期
2 宋丽君;马骏;赖积保;余涛;李治;;基于改进集群计算的遥感数据快速处理平台[J];福建电脑;2012年11期
3 吕海;邸瑞华;龚华;;大规模结构有限元分析程序在多核集群计算环境中的性能分析和优化[J];计算机科学;2012年01期
4 余平;;基于混合域代理的云计算数据安全[J];网络安全技术与应用;2015年10期
5 曾碧卿,陈志刚,刘安丰,曾志文;一种集群计算系统中并行I/O文件存储分配策略[J];小型微型计算机系统;2005年05期
6 祁美玲;赵晓莹;齐记;齐新;周庆国;;SRIM的GPU化工作进展[J];中国教育网络;2012年01期
7 徐晓飞,康继昌,花嵘;基于双注册的LINUX下专用网卡驱动程序开发[J];计算机工程与应用;2002年12期
8 范秋生;;基于集群管理系统相关理论及关键技术研究[J];办公自动化;2011年24期
9 陶胜;倪晓军;严献科;;动漫集群渲染调度系统的实现与研究[J];电脑与信息技术;2016年05期
10 王国明;;高性能集群计算系统的结构与设计探讨[J];电脑知识与技术;2005年35期
11 白静;王以宁;;教育信息化视角下云计算的特征及应用[J];软件导刊(教育技术);2010年10期
12 陈诗然;胡凯;张伟;张璐;;多集群并行作业的性能监测及分析[J];计算机工程;2008年13期
13 刘青焱;庄海滨;夏永静;刘湘军;;大规模单核苷酸多态性位点验证的集群解决方案[J];计算机应用研究;2007年01期
14 戚前方,张俊卿;交易中间件在民航业务中的应用[J];中国民航学院学报;2003年S2期
15 刘焕敏;王华;段慧芬;;集群渲染在航天仿真中的研究与实现[J];飞行器测控学报;2010年04期
16 陈煜;尹亚伟;蒋海俭;;一种基于集群计算技术的电子支付联机软件架构模型[J];计算机应用与软件;2012年01期
17 李涛;柳林;吴小勇;;分布式集群并行仿真技术研究[J];微计算机信息;2010年25期
18 何静;;云计算安全规划方案探讨[J];计算机与网络;2018年19期
19 常辉;雷小永;戴树岭;;基于动态负载平衡的sort-first绘制集群[J];北京航空航天大学学报;2010年04期
中国博士学位论文全文数据库 前1条
1 周峥;基于集群计算环境的核外计算中间件关键技术研究[D];武汉大学;2013年
中国硕士学位论文全文数据库 前12条
1 吴颖;一种基于LINUX的集群计算系统的设计与实现[D];四川大学;2005年
2 张新洲;面向分布式集群计算的容错技术研究与设计[D];华东师范大学;2015年
3 姚成浪;基于MPI的集群计算系统设计与实现[D];哈尔滨工程大学;2007年
4 赵姗;集群系统作业调度优化技术研究与实现[D];西北工业大学;2006年
5 于集冬;高性能集群中基于资源分区管理的作业调度[D];华中科技大学;2007年
6 汪伟;分布式虚拟装配环境下资源管理与基于集群计算资源的并行渲染技术研究[D];上海交通大学;2008年
7 张文火;基于DirectX集群并行渲染系统设计与实现[D];电子科技大学;2011年
8 王静;远程渲染平台Web应用系统构建[D];复旦大学;2011年
9 杨友超;基于强化学习的网络切片动态资源管理算法研究[D];重庆邮电大学;2019年
10 龚勖豪;内容汇聚子系统中资源管理与分析模块的设计与实现[D];北京邮电大学;2018年
11 于楠;V2V通信中的资源管理与性能研究[D];北京邮电大学;2018年
12 陈智;集群计算效率约束下的HADOOP鲁棒性优化研究[D];辽宁大学;2014年
中国重要报纸全文数据库 前2条
1 院图;电子资源管理与深化服务研讨会召开[N];中国社会科学院院报;2007年
2 刘喜喜;IT资源管理过不去的坎[N];中国计算机报;2006年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978