阅兵管理模块

parade-manage的Python项目详细描述


巡游管理

Parade-manage是游行的标志。

注意:应该先安装parade

安装

安装很简单:

> pip install parade-manage

用法

任务DAG:

 t1  a   b   c
  \ / \ / \ / 
   d   e   f
    \ / \
     g   h

notet1是表名,其他是任务名 先输入您的项目

> cd your_project

初始化类

fromparade_manageimportParadeManagemanage=ParadeManage()

如果任务a失败,您可以获取任务a的子任务和deps,如

> manage.get_task('a')# get task a([a, d, e, g, h], {'a': [], 'd': [a], 'e': ['a'], 'g': ['d', 'e'], 'h': [e]})

第一个结果是任务,另一个是deps。而且,你可以得到许多失败的任务。

> manage.get_task(['d', 'e'])# get task d and e(['d', 'e', 'g', 'h'], {'d':[], 'e': [], 'g': ['d', 'e'], 'h': ['e']})

然后,创建流和存储流,生成一个yaml文件

> manage.store_task_flow('a')# args: 'a' or ['d', 'e']  

或者,按任务名称删除流

> manage.rm_task_flow('a')

运行流,执行失败的任务

manage.run_taskflow('a')

有时,任务不依赖于其他任务,而是使用一些表。 现在你可以得到表格和任务了。

> manage.get_source('d')['t1', 'a']# return table 't1' and task name 'a'

如果表t1失败,可以使用store_source_flow存储流

> manage.store_source_flow('t1')# return a flow related to etl task only

欢迎加入QQ群-->: 979659372 Python中文网_新手群

推荐PyPI第三方库


热门话题
java对ServiceListener和ServiceTracker调用提供了哪些排序保证?   java找不到方法格式的符号(DateTimeFormatter)?   mysql有没有一种方法可以将TCPDump输出到一个文件中,并用Java对其进行过滤,每5秒钟用新数据覆盖一次该文件?   java如何最好地配置用户上传支持文件的上传位置   java我在Android上使用OData4j,我无法获取实体   JPA实体关系简单示例中的java获取错误   JAVANoClassDefFoundError:安卓。应用程序。用法安卓中的UsageStatsManager   Eclipse中javaoo代码分析   java MethodVisitor抛出类格式错误   java为什么在从ViewModel调用时,改型排队不起作用?   调试小程序Java控制台:删除跟踪消息大小限制   java复杂安卓活动动画   java如何在使用JDOM2解析XML时忽略注释内容   java通过循环创建文本字段   即使在bufferedwriter关闭后也未发现java文件异常   单链表恢复中的java错误