Soneti Orchestration的Luigi任务
soneti的Python项目详细描述
#Soneti Orchestrator
Soneti服务的编排(即Senpy、GSicrawler、Scaner等)。 编排基于luigi守护进程、一组自定义luigi任务和一些用于提供调度的附加代码。
此存储库包含:
- 一个python包,包含几个用于主要soneti服务的自定义luigi任务。该软件包也可以通过pypi获得(pip install soneti)。
- 一个包含luigi和用于调度任务的脚本的基本映像。
- example文件夹中的示例编排器