問題說明:
這是自己最近幾天本科畢設的相關內容,分別是大數據環境的搭建、大數據Spark實時分析、web頁面展示三大部分。由於自己曾經那個機械硬盤已經壞了,放系統的固態硬盤又不足以搭建一個完全分佈式的大數據環境。自己想起了曾經被自己荒廢的兩臺服務器,分別是筆者大二/大三買的阿里雲和騰訊雲的服務器,但是安裝zookeeper最好需要奇數個節點,所以今天筆者在滴滴雲上買了三個月的雲服務器,於是,筆者開始自己第一個階段的大數據配置。
基本環境:
- 阿里雲 1核2G40G(我的博客所用)
- 騰訊雲 1核2G50G(雙十一買的,很便宜)
- 滴滴雲 2核4G40G(3個月,答辯是夠用了,而且才30塊錢,準備主節點)
- 均爲centos7.x
第一個小任務:centos7 添加新的用戶
- 滴滴雲
- 阿里雲:
- 騰訊雲