服務器環境:
服務器:centos7
搭建步驟:略
SSH免密登陸
- 新建用戶和用戶組(hadoop): https://blog.csdn.net/zhbzhbzhbbaby/article/details/80824428
- 給用戶添加sud權限 因爲Linkis的服務是以 sudo -u ${linux-user} 方式來切換引擎,從而執行作業,所以部署用戶需要有 sudo 權限,而且是免密的 https://www.cnblogs.com/jacob-tian/p/6477638.html:
vi /etc/sudoers
hadoop ALL=(ALL) NOPASSWD: NOPASSWD: ALL
重啓:
source /etc/sudoer
3.切換到相應的用戶目錄下:
su hadoop
- 設置免密
sudo service sshd status ## 查看ssh服務狀態
sudo service sshd restart ##重啓ssh服務
第0步:cd .ssh/
第一步:ssh-keygen -t rsa //然後提示輸入直接按回車就好
第二步:cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
第三步:chmod og-wx ~/.ssh/authorized_keys
第四步:chmod 750 $HOME
第五步:ssh localhost #在使用ssh登陸;如果直接登陸進來了就證明成功了;
搞定!
- 安裝hadoop:https://blog.csdn.net/cafebar123/article/details/73500014
- 安裝spark:https://blog.csdn.net/penyok/article/details/81483527 (spark安裝scala:https://www.cnblogs.com/shaosks/p/9242181.html)
- 安裝hive:https://www.cnblogs.com/thisyan/p/9609497.html
- 安裝nginx:https://www.tecmint.com/install-nginx-on-centos-7/
linkis 安裝指南
- MySQL (5.5+),如何安裝MySQL(https://www.runoob.com/mysql/mysql-install.html)
- JDK (1.8.0_141以上),如何安裝JDK(https://blog.csdn.net/u010590120/article/details/94736800)
- Python(2.x和3.x都支持),如何安裝Python(https://www.cnblogs.com/xiujin/p/11477419.html)
部署指南
根據上述的操作、所有的環境都可以搭建完成;後續根據linkis提供的文檔一鍵安裝即可;