HPC 作业调度中深度强化学习的统计评估

研究内容

该预印本关注高性能计算（HPC）作业调度：深度强化学习（DRL）可用于学习作业选择，但仅与启发式方法比较，并不足以说明其相对于动作掩码本身的价值。作者在统一非参数框架下，用十个随机种子、两个真实 Slurm 工作负载轨迹（一个同构、一个异构）进行对比。

方法与结果

实验包含六种 DRL 处理：PPO、A2C 与 DQN 各带掩码和不带掩码，另有三条启发式基线和种子配对的掩码均匀随机控制。所有带掩码处理都完成评估，未掩码处理则被截断。同构轨迹上，没有带掩码 DRL 处理在平均等待时间、平均与最大有界减速上显著优于控制组。异构轨迹上，MaskablePPO 在这三项指标上均优于控制组：平均等待时间与三种启发式在 10% 幅度内相当，最大有界减速比后到先服务（LCFS）低 22%。MaskablePPO 在两条轨迹的完整处理中平均等待时间排名领先，但 Nemenyi 比较未发现其与 MaskableA2C 有显著差异。带掩码变体中，MaskablePPO 记录的平均训练时间最低，MaskableDQN 的平均决策延迟最低。

限制与待核实

来源为 arXiv 预印本摘要，未经同行评审，结论尚未得到独立验证；具体实现细节、硬件环境与完整数据需查阅原文确认。