jupyter和cdsw的数据科学工作空间

dsws的Python项目详细描述


数据科学工作区(DSW)

是用于配置和使用现有Python包的Python包。其目的是使不同的源数据平台在python即席分析和工作流分析中能够一致地访问,而不依赖于数据源或repl/运行时环境。

主要功能

除了依赖库之外,dsws没有提供任何功能。相反,它提供了一致和简洁地使用现有库的约定。惯例包括:

  • 数据访问的配置在会话开始时实例化,具体用于分析。
  • 配置不仅包括源数据连接,还包括连接中的环境首选项,如默认数据库和资源队列。
  • 连接和查询的通用方法语法。
  • 对于ipython环境,包括用于执行sql的行和单元格魔术
  • 配置文件启动脚本的一致性方法。
  • 能够从python会话中转换到已配置的cli。

环境

源于从边缘节点连接到流行Hadoop分布(HDP,CDH)的地址连接复杂性。自最初的版本以来,它现在包括了从群集边缘节点虚拟环境、本地设备虚拟环境、cdsw、jupyter笔记本或quickstart/sandbox连接的约定DSWS旨在在这些evnironements中提供一致的用户体验

包括库和clis

Excel库、类、配置和类型。

packagedefault nameclasstypeInclExpRoadmap
impylaimpylaws_impyla.pyconnX
pyodbcpyodbcws_pyodbc.pyconnX
ioproioprows_iopro.pyconnX
ibisibisws_ibis.pyconnX
pysparkspark (sql)ws_spark.pysessX
SQLAlchemysaws_sqlalchemy.pyconnX
dask-yarndyws_daskyarn.pysessX
phoenixdbpheonixws_pheonix.pyconnX
pydruiddruidws_druid.pyconnX
pyflinkflinkws_flink.pyconnX
pandasqlpsws_ps.pyX

欢迎加入QQ群-->: 979659372 Python中文网_新手群

推荐PyPI第三方库


热门话题
java使用CSPRNG中的序列种子PRNG安全吗?   java如何使JTable列大小与内容精确(或紧密)匹配?   java Android textview具有两种不同大小的文本   java在任意事物的列表(数组)中创建关联的最佳方法是什么?   java保存可扩展字符串?   java成员类(内部类)如何访问外部类的实例变量?   java使用Android 6.0(API级别23)使用rest的最佳方式是什么   java为什么我会收到“学习记录”。Student@25a43blb'尝试显示链接列表中的所有对象时?   java如何将SVG文本转换为SVG路径?   java Paypal返回URL参数支付状态   java Libgdx:导出到可运行Jar   java JPA获取连接实体的最小/最大属性   附加到类型变量的java编号?   java Object[]到底是什么?   java如何在安卓中的片段和活动之间共享数据   java使用MinGW为windows构建linux库   java将变量值传递给eval函数   java仅在转换完成时使方法返回   Java二维数组对角线