等待作业完成的有效方法:python和drm

2024-05-21 01:37:51 发布

您现在位置:Python中文网/ 问答频道 /正文

我想问一下我通过Python使用的drmaaapi中的“等待”特性。它是否执行常量qstat(如果我们在SGE上运行它)来检查程序是否已完成执行。在

我们的管理员希望我们避免任何恒定的qstat,因为它会由于调度器上的额外负载而降低性能。在

一般来说,wat是通过DRMAA检查作业状态的一种有效方法,而不会让调度器过度工作。在

谢谢! -阿比希


Tags: 方法管理员特性性能调度常量sge过度
1条回答
网友
1楼 · 发布于 2024-05-21 01:37:51

从drmaaapi的角度来看,没有更好的方法。API只是反映了在shell脚本中使用默认命令行工具所能做的事情。在

问题在于您的特定DRMAA库的实现策略,因为SGE提供了比持续轮询更好的方法来获取作业状态更新。你因此有以下选择:

  • 修复您使用的DRMAA实现,它依赖于与调度器的一些直接通信。wire协议的一个信息源可以是opengridscheduler项目。在
  • 等到Univa(或其他公司)为他们的网格引擎产品交付DRMAAv2实现。此版本的API支持对作业状态更改进行库回调(http://ogf.org/documents/GFD.198.pdf),这似乎正是你想要的。在

相关问题 更多 >