没有项目描述

ddui的Python项目详细描述


#Airflow的数据驱动插件


它非常容易出错,因此非常耗时,因为我们经常在实验和生产之间切换。


datadriver项目的目标是通过制作基于pandas和sklearn的glue代码**来解决这个问题**
用于模型化,**和基于airflow的**来实现培训的自动化、调度和监控
和预测管道。


结合datadriver的api(pyddapi),它提供了一个dag视图来跟踪机器学习工作流(或数据流)。

[img/ddui_titan1.png](img/ddui_titan1.png)
-选择一个任务以查看图表并描述输出表上的度量值
![img/ddui_titan3.png](img/ddui_titan3.png)
-查看直方图以验证列是否正确(分布、NAS数量、
唯一值等)
![img/ddui-tu-titan2.png](img/ddui-tu-titan2.png)


《入门入门


>git-clone-git-git-url-u-this-project&;cd-this-project


>本地安装:


pip-install-e.
>ddui-install

>docker-install:


>
>
/run docker.sh











软件包模块->;像破折号应用程序一样定义的应用程序,具有回调和事件处理功能。它稍后导入plugin.py中
dash-components->;HTML自定义组件,如面板或alert div
orm->;函数,用于访问Airflow元存储并检索DAGS列表和信息
plot->;函数,它们使用plotly返回图形对象
plugin->;定义实现Airflow插件接口的DataDriveri插件https://aiflow.apache.org/plugin s.html interface
views->;一个也实现Dash的FlaskAdminView,以便能够在Airflow




[PyDIP-Dui](IMG/RealEnsieS.PayNo.PNG)
Br/>开发人员设置
BR/>在Desta/DAG中存在一个DAG,它嘲笑DATADRAY API的行为,但是
对PyDAPI没有任何依赖性。
> BR/>您可以使用它来开发用户界面,使用tests/dev_tools中的脚本。

cd tests/dev_tools
python run_webserver.py

它会覆盖Airflow_u Core_u Dags_文件夹来查看测试/DAG。


欢迎加入QQ群-->: 979659372 Python中文网_新手群

推荐PyPI第三方库


热门话题
swing Java按钮/网格布局   java列出Google日历中的所有事件   java无效:单击API publisher test按钮后连接到后端时出错   带有内部赋值的java While循环导致checkstyle错误   java为什么trimToSize/ensureCapacity方法提供“公共”级访问?   文件输出流的java问题   ListIterator和并发修改异常的java问题   java如何使用两个URL映射   无法识别使用“./../”构造的字符串java相对路径,为什么?   首次写入remotelyclosedsocket不会触发异常,对吗?JAVA   java OneDrive REST API为文件上载提供了400个无效谓词   Java泛型、集合接口和对象类的问题   OpenSSL Java安全提供程序   jmeter java运行jmx禁用操作