轻松部署气流,促进当地发展

dockflow的Python项目详细描述


Dockflow命令行

此软件包要求在您的计算机上安装并运行docker。在

入门

  1. 安装dockflow:
    pip install dockflow

  2. 验证docker从私有GCR存储库中提取:
    2.1条。首先确保您的gcloud经过身份验证。
    2.2条。使用gcloud config set project <project name>
    确保您在正确的项目中 2.3条。使用gcloud auth configure-docker验证docker从私有容器repo中提取。在

快速启动

  1. 确保docker文件共享设置允许访问您的开发目录。在
  2. 导航到dags文件夹的根目录。在
  3. 使用dockflow config并输入容器repo url(不包括版本)。
    • 这将把url保存在一个配置文件中。在
    • 例如gcr.io/<project>/<container>
    • 仅当容器回购发生变化时才应使用此选项。在
  4. 如果图像版本标记不是composer-1.11.2-airflow-1.10.9,请使用dockflow start -iv <version>指定标记
  5. 使用dockflow start(这将装入dag文件夹并启动气流)。在
  6. 使用UI添加连接。
    • 管理->连接->创建
  7. 使用dockflow refresh刷新配置缓存或绑定配置。在
  8. 记住使用dockflow stop关闭实例以节省本地计算机资源。
    • 状态将与dags文件夹保存在同一目录中。在
  9. 要停止并删除容器,请使用dockflow stop --rm

可用的作曲家版本

  • 作曲家-1.11.2-气流-1.10.9
  • composer-1.10.6-airflow-1.10.6(默认)
  • 作曲家-1.7.2-气流-1.10.2

CloudSQL代理

docker run -d \
  -v <PATH_TO_KEY_FILE>:/config \
  -p 127.0.0.1:5432:5432 \
  --network='dockflow' \
  --name='cloudsql' \
  gcr.io/cloudsql-docker/gce-proxy:1.17 /cloud_sql_proxy \
  -instances=<INSTANCE_CONNECTION_NAME>=tcp:0.0.0.0:5432 -credential_file=/config

欢迎加入QQ群-->: 979659372 Python中文网_新手群

推荐PyPI第三方库


热门话题
java是用来加速集合中对象查找的哈希代码吗?   java在Servlet中执行后将JSP请求重定向到自身   JavaHTTPStatus415使用Ajax将Json数据发布到SpringMVC4也使用了SpringSecurity   java为什么谷歌应用引擎MySQL JDBC URL不与数据库连接?   多线程Java:强制停止ExecutorService线程   java使用For循环向组合框添加值   java子Git“内存不足”和“超出GC开销限制”   使用正则表达式运行计算器程序时出现java NumberFormatException   java MockMvc测试POST请求返回错误:实际调用有不同的参数:   java自动在虚拟机内移动鼠标,与真实的鼠标无关   当类位于类路径上时,java Surefire抛出SurefireReflectionException   java GroupLayout错误:找不到错误的行   SpringHibernateJava。lang.NoSuchFieldError:实例   从一个java密钥库生成多个个人证书的身份验证   java 1.6.013中的eclipse@WebServlet注释支持   java Spring Webservicetemplate连接重置错误   spring如何修复SqlRowSet上的“无效游标SQL异常”。Java中的Next()   java Websphere版本迁移