用于将函数提交到htcondor批处理集群的python接口
conp的Python项目详细描述
康比
在(cern)htcondor批处理集群上调用python函数-使用tqdm进度条。
如何使用
高级接口使用:
import conpy
tasks = [...] # list of dicts with keys ["task", "args", "kwargs"] run on each node as task(*args, **kwargs)
results = conpy.local_submit(tasks)
results = conpy.mp_submit(tasks, ncores=4)
results = conpy.sge_submit("name", "/tmp/conpy-temporaries", tasks=tasks, options="-q hep.q")
返回值是按任务顺序排列的每个任务的结果列表。