原创 storm 配置項

配置項 配置說明 storm.zookeeper.servers ZooKeeper服務器列表 storm.zookeeper.port ZooKeeper連接端口 storm.local.dir storm使用的本地文件系統目錄(必須存

原创 storm常見問題及解決方法收集【持續更新中】

以下是對個人在使用Storm過程中遇到的一些常見問題及解決方法的整理,其中部分問題的解決方法來自於網絡,由於已找不到原始鏈接,抱歉這裏沒有逐一列舉。 1. 發佈topologies到遠程集羣時,出現Nimbus host is not

原创 Storm安裝配置(單機版)筆記

本篇幅講述Twitter Storm安裝配置,也作爲自己的筆記。 storm的官方安裝說明(e文):https://github.com/nathanmarz/storm/wiki/Setting-up-a-Storm-cluster

原创 Twitter Storm: 搭建storm集羣

Twitter Storm: 搭建storm集羣 發表於 2011 年 10 月 07 日 由 xumingming 作者: xumingming | 可以轉載, 但必須以超鏈接形式標明文章原始出處和作者信息及版權聲明 網址:

原创 storm 原理簡介及單機版安裝指南

目錄[-] 1、準備工作 2、一個Storm集羣的基本組件 3、Topologies 4、Stream 5、數據模型(Data Model) 6、一個簡單的Topology 7、流分組策略(Stream grouping) 8、使用

原创 Twitter Storm 安裝實戰

實際上安裝Twitter Storm是上週三的事情了,週三的時候安裝了一個單機版的,用WordCount跑了一下,感覺還不錯。週四試着在集羣上安裝,碰到了一些問題,一直折騰到週五,留了個尾巴(沒有做測試),這週一終於跑了WordCoun

原创 Eclipse打包jar

總體思路是先打成jar再把jar打成exe。主要看1.3和2.3裏的內容就可以了。 1.將項目打成jar: 1.1 要將項目打包成jar文件,方法很多,可以用Eclipse自帶的打包工具Ant打包,也可以用Eclipse的Export生成

原创 maven-dependency-plugin (goals "copy-dependencies", "unpack") is not supported by m2e

POM文件報錯maven-dependency-plugin (goals "copy-dependencies", "unpack") is not supported by m2e.,  在</build>標籤前添加如下內容  J

原创 storm啓動過程

zookeeper啓動並測試 1、在所有服務器中執行:zookeeper-3.4.3/bin/zkServer.sh start 2、輸入jps命令

原创 Twitter Storm簡介

Twitter Storm簡介 發表於 2011 年 09 月 27 日 由 xumingming 作者: xumingming | 可以轉載, 但必須以超鏈接形式標明文章原始出處和作者信息及版權聲明 網址: http://xu

原创 Eclipse打JAR包,插件FatJar安裝與使用

下載RUL:  下載fatJar插件,解壓縮後是一個.../plugins/(net...)把plugins下面的(net..)文件夾拷貝到eclipse的plugins下,重新啓動Eclipse3.1,Windows=>prefern

原创 ZooKeeper安裝過程

一、安裝需求 安裝java 1.6及hadoop 0.20.x 二、安裝zookeeper 1、下載zookeeper wget http://mirror.bit.edu.cn/apache//zookeeper/zook

原创 Twitter Storm: Transactional Topolgoy簡介

Twitter Storm: Transactional Topolgoy簡介 發表於 2012 年 02 月 14 日 由 xumingming 作者: xumingming | 可以轉載, 但必須以超鏈接形式標明文

原创 Twitter Storm源代碼分析之acker工作流程

Twitter Storm源代碼分析之acker工作流程 發表於 2011 年 12 月 30 日 由 xumingming 作者: xumingming | 可以轉載, 但必須以超鏈接形式標明文章原始出處和作者信息及版權

原创 Twitter Storm源代碼分析之Nimbus/Supervisor本地目錄結構

Twitter Storm源代碼分析之Nimbus/Supervisor本地目錄結構 發表於 2012 年 01 月 04 日 由 xumingming 作者: xumingming | 可以轉載, 但必須以超鏈接形式標明