在Kubernetes上部署自适应多用户Dask集群

2024-05-16 15:06:17 发布

您现在位置:Python中文网/ 问答频道 /正文

在Kubernetes上部署自适应多用户Dask集群的正确方法是什么

我需要一个多人可用于其工作的集中式机器集群,以便它可以添加或删除更多机器(最好是0名工人)


Tags: 方法机器部署集群kubernetesdask多用户工人
1条回答
网友
1楼 · 发布于 2024-05-16 15:06:17

考虑到您需要多人共享您管理的机器集群,我建议您查看Dask Gateway

Dask群集一次只能由一个人使用。您可以使用Dask Helm Chartdask-kubernetes创建集群,但是这些方法中的每一个都创建一个集群供一个人使用

Dask网关为管理Dask群集提供了一个安全的多租户服务器

要开始使用Kubernetes,您需要使用网关代理令牌创建一个Helm配置文件(config.yaml

gateway:
  proxyToken: "<RANDOM TOKEN>"

提示:您可以使用openssl rand -hex 32生成合适的令牌

然后安装图表

helm repo add dask-gateway https://dask.org/dask-gateway-helm-repo/
helm repo update
helm install  values config.yaml my-release dask-gateway/dask-gateway

Dask Gateway Kubernetes Documentation

相关问题 更多 >