阿兹卡班编曲
azkaban-orchestrator的Python项目详细描述
阿兹卡班编排器代码块::console
define orchestration logic
------------
使用以下符号创建文件并定义管道之间的依赖关系。
*管道名称是azkaban中的项目名称。管道的项目和流名称应相同。
*使用“->;”表示两个管道之间的**硬依赖**。A->;B表示A成功运行时B运行。
*使用“.>;”表示两个管道之间的**软依赖关系**。a.>;b表示b在a之后运行,尽管a运行是否成功。
*如果管道有一些**参数**,请将它们按管道名称(如a(status=1 date))放在括号中。使用竖线“”分隔参数。
*定义**群集**使用冒号“:”例如,S:A、B、C表示群集S包括管道A、B和C。若要从一个群集移动,群集内的所有管道都应成功运行。
代码块:控制台代码块:控制台代码块::控制台
a->;b->;d(日期)
代码块::控制台
b->;d(日期)
d(日期)->;f(状态=1)
d(日期)->;e
f(状态=1)->;e
a->;c
c->;e
c->;f(状态=2)
代码::python
import logging
from azkaban_orchestrator import orchestrator
client=orchestrator.client(
diagram_file_name='/path/to/diargam_file',
host=”azkaban_host',
username=”azkaban_username',
password=”azkaban passwword”,
logger=logging.getlogger(name_u)
)
参数)
代码::python
from azkaban_orchestrator import diagram
d.show()
define orchestration logic
------------
使用以下符号创建文件并定义管道之间的依赖关系。
*管道名称是azkaban中的项目名称。管道的项目和流名称应相同。
*使用“->;”表示两个管道之间的**硬依赖**。A->;B表示A成功运行时B运行。
*使用“.>;”表示两个管道之间的**软依赖关系**。a.>;b表示b在a之后运行,尽管a运行是否成功。
*如果管道有一些**参数**,请将它们按管道名称(如a(status=1 date))放在括号中。使用竖线“”分隔参数。
*定义**群集**使用冒号“:”例如,S:A、B、C表示群集S包括管道A、B和C。若要从一个群集移动,群集内的所有管道都应成功运行。
代码块:控制台代码块:控制台代码块::控制台
a->;b->;d(日期)
代码块::控制台
d(日期)->;f(状态=1)
d(日期)->;e
f(状态=1)->;e
a->;c
c->;e
c->;f(状态=2)
代码::python
import logging
from azkaban_orchestrator import orchestrator
client=orchestrator.client(
diagram_file_name='/path/to/diargam_file',
host=”azkaban_host',
username=”azkaban_username',
password=”azkaban passwword”,
logger=logging.getlogger(name_u)
)
参数)
代码::python
from azkaban_orchestrator import diagram