使用slurm集群自动运行实验的python 3库
slurmqueen的Python项目详细描述
slurmqueen
python 3库,用于使用slurm集群在黑盒工具上自动运行实验。 特别是,此安全带允许您:
- 通过声明要在工具上运行的任务列表来定义实验。
- 生成运行每个任务的bash脚本。
- 在slurm集群上运行这些bash脚本并下载结果。
- 通过sql接口分析结果。
有关详细用法,请参见this jupyter notebook。
安装
对于大多数用户,推荐的安装方法是通过pip:
pip install slurmqueen
依赖关系:
- 帕拉米科
- 熊猫
- pathlib(包含在python 3.4或更高版本中)
- ipywidgets(可选)
- 单击(slurm集群上的必需项以运行示例)
- 笔记本(需要运行示例笔记本)
如果需要,请参阅requirements.txt以获取详细的版本信息。