使用ncar集群的适当设置扩展dask jobqueue的实用程序
ncar-jobqueue的Python项目详细描述
使用ncar群集的适当设置展开dask-jobqueue的实用程序。
支持的群集:
- 夏延
- 卡斯珀(DAV)
- CGD的霍巴特
安装
ncar-jobqueue可以通过pip从pypi安装:
pip install ncar-jobqueue
用法
卡斯珀
>>>fromncar_jobqueueimportNCARCluster>>>fromdask.distributedimportClient>>>cluster=NCARCluster()>>>clusterNCARCluster(cores=0,memory=0B,workers=0/0,jobs=0/0)>>>cluster.scale(2)>>>clusterNCARCluster(cores=2,memory=50.00GB,workers=2/2,jobs=2/2)>>>client=Client(cluster)
夏延
>>>fromncar_jobqueueimportNCARCluster>>>fromdask.distributedimportClient>>>cluster=NCARCluster()>>>clusterNCARCluster(cores=0,memory=0B,workers=0/0,jobs=0/0)>>>cluster.scale(2)>>>clusterNCARCluster(cores=72,memory=218.00GB,workers=2/2,jobs=2/2)>>>client=Client(cluster)
霍巴特
>>>fromncar_jobqueueimportNCARCluster>>>fromdask.distributedimportClient>>>cluster=NCARCluster()>>>clusterNCARCluster(cores=0,memory=0B,workers=0/0,jobs=0/0)>>>cluster.scale(2)>>>clusterNCARCluster(cores=96,memory=192.00GB,workers=2/2,jobs=2/2)>>>client=Client(cluster)