原创 【shell】grep

【教訓】最近一個程序bug,是由於grep不熟引起的,我通過grep來過濾數據,保留我想要的。然後,習慣性地通過判斷返回值是否爲0,來確定執行的準確性。然後就這地方埋了個bug。 因爲,當你grep出的數據結果爲空時,他的返回值是1,此時

原创 【流式計算】Twitter Storm: Transactional Topolgoy簡介

作者: xumingming | 可以轉載, 但必須以超鏈接形式標明文章原始出處和作者信息及版權聲明 網址: http://xumingming.sinaapp.com/736/twitter-storm-transactional

原创 【流式計算】Twitter Storm: DRPC簡介

作者: xumingming | 可以轉載, 但必須以超鏈接形式標明文章原始出處和作者信息及版權聲明 網址: http://xumingming.sinaapp.com/756/twitter-storm-drpc/   本文翻譯自:

原创 【流式計算】Twitter Storm源代碼分析之CoordinatedBolt

作者: xumingming | 可以轉載, 但必須以超鏈接形式標明文章原始出處和作者信息及版權聲明 網址: http://xumingming.sinaapp.com/811/twitter-storm-code-analysis

原创 【流式計算】Twitter Storm源代碼分析之Topology的執行過程

作者: xumingming | 可以轉載, 但必須以超鏈接形式標明文章原始出處和作者信息及版權聲明 網址: http://xumingming.sinaapp.com/647/twitter-storm-code-analysis

原创 【redis】命令彙總

忘記哪裏搜刮來的了 exits key              //測試指定key是否存在,返回1表示存在,0不存在 del key1 key2 ....keyN //刪除給定key,返回刪除key的數目,0表示給定key都不存在 ty

原创 【流式計算】Twitter Storm: 搭建storm集羣

轉自網址: http://xumingming.sinaapp.com/179/twitter-storm-搭建storm集羣/ 本文翻譯自: 

原创 【hadoop】map reduce任務提交後系統幹嘛了

1、    文件上傳 DFSClient向JobTracker提交任務之前,會將任務運行所需要的文件放入HDFS,從而可被JobTracker和TaskTracker得到:一般有執行文件,配置文件,input數據等 當Map-Reduce

原创 【經驗教訓】shell read echo中的轉義字符

    近期用shell在處理數據時,發現read命令在讀取數據時會把\t替換成空格,以及行末尾的\t捨棄。查看read的help,發現-r可以保留轉義字符,搜了一下有人也說可以用-r,但是我的實驗結果卻是即使-r也還是依舊。無奈該用aw

原创 【基礎C&C++】內存函數

 1.malloc函數 原型:extern void *malloc(unsigned int num_bytes);   頭文件:在TC2.0中可以用malloc.h或 alloc.h (注意:alloc.h 與 malloc.h 的

原创 【基礎C&C++】內存拷貝strcpy,memcpy,memmove,strncpy源碼

strcpy char *strcpy(char*strDest, const char *strSrc) { assert((strDest!=NULL) && (strSrc!=NULL)); char *addres

原创 【流式計算】如何“打敗”CAP定理

轉自:http://www.programmer.com.cn/9260/ 英文原文:http://nathanmarz.com/blog/how-to-beat-the-cap-theorem.html CAP定理是數據系統設計的基本

原创 【shell】變量

  環境變量設置:export key=value 取消設置變量:unset或unset –v 取消函數         :unset –f   declare聲明變量 -p  顯示變量的屬性 -a  變量是一個數組 -i   變量是一個

原创 【流式計算】Twitter Storm源代碼分析之Nimbus/Supervisor本地目錄結構

作者: xumingming | 可以轉載, 但必須以超鏈接形式標明文章原始出處和作者信息及版權聲明 網址: http://xumingming.sinaapp.com/483/twitter-storm-code-analysis-

原创 【流式計算】Yahoo! s4和Twitter storm的粗略比較

轉自:http://www.blogjava.net/killme2008/archive/2011/11/08/363238.html Items\Projects Yahoo! s4 Twitter Storm 協議 Apache