原创 Storm0.9.2 集羣安裝部署3——安裝 Storm 集羣並啓動 Storm

Storm0.9.2 集羣安裝部署需要的軟件:Storm0.9.2 集羣安裝部署1. 部署環境準備2. 部署 Storm 集羣2.1 搭建 Zookeeper 集羣2.2 依賴軟件安裝2.3 安裝 Storm 集羣2.4 啓動 S

原创 Maven——使用eclipse建立maven工程

使用eclipse建立maven工程1.eclipse配置maven1.apache-maven-3.2.1同級目錄下新建repository文件夾2.修改配置文件settings.xml3.添加maven環境:Windows--

原创 Storm0.9.2 集羣安裝部署1——Centos6.5的默認python2.6.6版本升級到python2.7.15

安裝 Python 2.7.15 Centos6默認python的版本是2.6的,但是現在很多庫都需要python版本2.7.15的,所以需要升級版本 1.首先從官網下載python源碼包: https://www.python.

原创 Storm0.9.2 集羣安裝部署2——Zookeeper 集羣安裝

搭建 Zookeeper 集羣 注意:我們的集羣一般有3個節點,這些操作基本3個節點都要進行,這裏只針對一個節點進行說明。 1 進入/home/tools目錄,上傳zookeeper-3.4.13 [root@storm01 ho

原创 Storm與Kafka——Kafka的安裝與使用

Kafka的安裝與使用Kafka的安裝步驟Kafka操作命令 Kafka的安裝步驟 1. 官網下載Kafka 下載地址:http://kafka.apache.org/downloads.html 2. 將Kafka上傳到/hom

原创 Storm與Kafka——kafka簡單介紹

kafka基本介紹Storm與KafkaKafka相關術語介紹 Storm與Kafka Kafka是一種高吞吐的分佈式發佈訂閱消息系統。 基於zookeeper協調。常用於網站日誌收集,消息服務等 主要應用場景是:日誌收集系統和消

原创 Maven——本地/Storm集羣模式運行第一個helloworld項目

本地/集羣運行項目1.創建maven項目2.添加依賴3.創建項目包4.編寫java代碼5.運行"HelloWorld"項目1.本地模式2.集羣模式a.將maven項目打成jar包,上傳到Storm集羣主節點storm01的/hom

原创 Storm與Kafka——客戶端實現Kafka的消息的生產與消費

eclipse運行Kafka的producer和consumer1.創建項目2.編寫項目內容producer與consumer3.運行項目4.查看結果5.報錯及處理 這篇文章是本人在學習時爲鞏固平時所學而寫的,並沒有什麼專業性的指

原创 完全分佈式部署Hadoop

完全分佈式部署Hadoop操作步驟:1. 準備 3 臺客戶機(關閉防火牆、靜態 ip、主機名稱)(root用戶)新建一臺虛擬機,進行簡單配置克隆虛擬機進行簡單配置2. hadoop201上安裝 jdk3. hadoop201上配置