使用drmaa和zmq的sun网格引擎(sge)高级python wapper
pythongrid的Python项目详细描述
pythongrid概述
主要开发地点:http://code.google.com/p/pythongrid/
主持人:Chris Widmer,Cheng Soon Ong
该模块使用sun网格引擎为python中的集群计算提供高级功能。由于某些集群环境众所周知是不可靠的,pythongrid试图在幕后处理作业监视和重新提交(在节点突然死亡的情况下),同时为用户提供一个简单的map reduce-like接口。
主要特点: -使用基于zmq的心跳监测工作状态 -健壮的错误检测(内存不足、节点故障) -意外失败时自动重新提交 -错误电子邮件,包括CPU/Mem统计信息 -用于监视作业的可选Web界面 -让我们在本地多处理和群集计算之间轻松切换
依赖关系 -皮兹马克 -drmaa python
开始(现在在pypi上!)以下内容: -轻松安装pythongrid -调整pythonrid_cfg.py
更改日志:
- 2013-07-08:修复了pythongrid_cfg.py的一些问题