国内刊号:43-1258/TP
国际刊号:1007-130X
发布日期:
作者:杨泓桢, 程伟, 杜量, 黄聃, 曾楚轩, 肖侬
单位:1.中山大学计算机学院,广东 广州 510006;2.中国联合网络通信有限公司广东省分公司算网研究运营基地,广东 广州 510630
关键词:高性能计算,大规模系统,特征分析,运行时间预测,集成学习,
高性能计算集群的作业日志可以用来分析系统工作负载,发现系统使用的周期性规律、作业特征之间的相关性和用户行为模式,并进一步帮助开发运行时间预测模型,降低作业运行时间估计值误差,提高作业回填调度的性能。现有的预测算法侧重于提高作业运行时间的平均预测准确率,而忽略了预测值低于实际运行时间的情况(低估预测),可能导致调度器提前终止执行中的作业,降低系统资源的有效利用率。为解决上述问题,在对HPC作业特征的长期变化趋势和相关性开展分析的基础上,提出了一个集成学习模型预测作业运行时间,并提出有序扩展最大值策略调整集成模型的预测结果。实验结果表明,作业运行时间预测模型在保持较高预测准确率的同时显著降低了低估率,并且具有较好的稳定性和泛化能力。
来源:2026年第1期
《计算机工程与科学》期刊编辑部