Linux下搭建Dask分佈式集羣

1. 提前安裝好python依賴包,否則之後有可能出現各種各樣的錯誤,反覆的編譯python。

# yum -y install zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-devel gdbm-devel db4-devel libpcap-devel xz-devel

2.安裝python3

我參考linux-python升級到最新版本安裝的python3.6版本

如遇到ssl模塊未安裝問題,請參考python3安裝文件遇到ssl未安裝問題

3.安裝Dask(參考官網Install Dask)

pip install "dask[complete]"    # Install everything

4.命令行配置Dask集羣(參考官網Command Line

$ dask-scheduler
Scheduler at:   tcp:dask-scheduler-hostname:port
$ dask-worker tcp:dask-scheduler-hostname:port

若Dask搭建成功,會出現以下信息:

Dask集羣連接成功

 

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章