原创 Kafka broker配置介紹

轉自:http://my.oschina.net/ielts0909/blog/94997 這部分內容對了解系統和提高軟件性能都有很大的幫助,kafka官網上也給出了比較詳細的配置詳單,但是我們還是直接從代碼來看broker到底有哪

原创 Kafka實現細節(上)

轉自:http://my.oschina.net/ielts0909/blog/94153 如果你第一次看kafka的文章,請先看《分佈式消息系統kafka初步》 之前有人問kafka和一般的MQ之間的區別,這個問題挺難回答,我覺

原创 Vim 插件管理工具 pathogen

DaNmarner 在 Hacker News 最近關於 Vim 插件的帖子 回覆中瞭解到一個叫做pathogen 的 Vim 腳本,其作用是改善 Vim 管理插件的方式。試用過後發現 pathogen 果然強大。是以撰文分享。

原创 Kafka開發環境搭建

轉自:http://my.oschina.net/ielts0909/blog/95440 如果你要利用代碼來跑kafka的應用,那你最好先把官網給出的example先在單機環境和分佈式環境下跑通,然後再逐步將原有的consum

原创 對互聯網海量數據實時計算的理解

轉自:http://www.cnblogs.com/panfeng412/archive/2011/10/28/realtime-computing-of-big-data.html 對互聯網海量數據實時計算的理解 1. 實時計算

原创 Twitter Storm源代碼分析之ZooKeeper中的目錄結構

轉自:http://xumingming.sinaapp.com/466/twitter-storm-code-analysis-zookeeper-dirs/ 我們知道Twitter Storm的所有的狀態信息都是保存在Zookee

原创 分佈式消息系統Kafka初步

轉自:http://my.oschina.net/ielts0909/blog/92972 在我們大量使用分佈式數據庫、分佈式計算集羣的時候,是否會遇到這樣的一些問題: l  我想分析一下用戶行爲(pageviews),以便我

原创 Storm集羣安裝部署步驟【詳細版】

轉自:http://www.cnblogs.com/panfeng412/archive/2012/11/30/how-to-install-and-deploy-storm-cluster.html 本文以Twitter Storm

原创 手把手教你在Ubuntu上安裝Apache、MySql和PHP

1:首先安裝apache:打開終端(ctrl+Alt+t), 輸入命令:sudo apt-get install apache2即可安裝, 安裝完後,打開瀏覽器,在地址欄輸入:localhost或者http://127.0.0.1 看到I

原创 twitter storm安裝和storm-start的本地運行

storm有兩種操作模式: 本地模式和遠程模式。使用本地模式的時候,你可以在你的本地機器上開發測試你的topology, 一切都在你的本地機器上模擬出來; 用遠端模式的時候你提交的topology會在一個集羣的機器上執行。 一個st

原创 非root帳號安裝zeromq和jzmq

安裝storm需要首先安裝zeromq和jzmq,root帳號安裝見twitter storm安裝和storm-start的本地運行 如果不是root帳號,那麼是無法把庫裝到默認的/usr/local/lib中,下面是非root帳號的安裝

原创 開源實時流處理系統小結

轉自:http://www.cnblogs.com/panfeng412/archive/2013/02/21/open-source-real-time-stream-processing-systems.html 開源實時流處理系

原创 Storm使用到的相關技術總結

轉自:http://www.cnblogs.com/panfeng412/archive/2012/12/16/storm-related-technique-summary.html Storm作爲一個開源的分佈式實時流計算框架,其

原创 Apache Maven 入門篇(下)

轉自:http://www.oracle.com/technetwork/cn/community/java/apache-maven-getting-started-2-405568-zhs.html 第一篇文章大概的介紹了一下

原创 Linux下安裝Maven

1.首先到Maven官網下載安裝包,目前最新版本爲3.0.5,下載文件爲apache-maven-3.0.5-bin.tar.gz,下載可以使用wget命令;2.進入下載文件夾,找到下載的文件,運行如下命令解壓 tar -xvf  apa