原创 hbase集羣維護

如果只增加集羣的存儲量,建議增加Hadoop datanode節點。 方法:- •停掉集羣包括Hadoop和hbase,當然也可以不停掉,直接在hadoop namenode的配置文件Slave裏添加新節點的host,別忘了在host文件

原创 zookeeper理論(轉載)

分佈式服務框架 Zookeeper -- 管理分佈式環境中的數據   許 令波, Java 工程師, 淘寶網 許令波,現就職於淘寶網,是一名 Java 開發工程師。對大型互聯網架構設計頗感興趣,喜歡鑽研開源框架的設計原理。有時間將學

原创 Avatar配置(轉載)

Hadoop 雙機熱備-AvatarNode部署 轉載自:http://blog.csdn.net/rzhzhz/article/details/7448453 Hadoop 雙機熱備 --AvatarNode部署 部署環境 虛擬機5

原创 java中assert的使用

一、assertion的意義和用法 J2SE 1.4在語言上提供了一個新特性,就是assertion功能,它是該版本在Java語言方面最大的革新。 從理論上來說,通過 assertion方式可以證明程

原创 hadoop基準測試

一、測試條件 集羣完全安裝配置後,應立即開始基準測試。基準測試時集羣裏不應該運行其他一切任務。 二、測試目標 1. 硬盤故障:新系統最常見的故障。可以通過運行高強度的IO基準測試程序集中測試。例如TestDFSIO 2. MapReduc

原创 SVN中補丁(patch)的製作與應用

  來源:http://wenxuezhai.net/archives/107 SVN中補丁(patch)的製作與應用 2012-07-11 最近,在項目中忽然有了使用補丁的需求,所以上網查了一下,找的一篇覺得不錯的文章,抄錄如下。

原创 使用svn 時打patch與應用 patch

  來源:http://blog.csdn.net/zjujoe/article/details/3622312 我們使用 svn 作爲版本管理工具。 有時同事 A 做的修改需要同事 B 去 Review, 同事 C 去提交。 今天發現

原创 hadoop作業執行之TaskTracker

轉自:http://hi.baidu.com/fengvsjinglove/item/7e78060ff64f5c1a3b53ee7c hadoop作業執行流程及代碼簡略解讀之四TaskTracker 6. TaskTracker Ta

原创 進程名殺進程

killall 進程名 pid='ps gaux | grep smonsvr | grep -v grep | awk '{print $2}'' kill -9 &pid 如何kill掉進程名包含某個字符串的一批進程: kill -

原创 ZK編程-創建節點+watcher(轉載)

華夏35度 Data Mining,NLP,Search Engine ZooKeeper編程 CreateMode PERSISTENT:創建後只要不刪就永久存在 EPHEMERAL:會話結束年結點自動被刪除 SEQUENTI

原创 linux下的arp命令詳解

轉自:http://it.100xuexi.com/view/otdetail/20120417/18e5dc81-17c3-4df1-8086-73f4b4c22956.html linux下的arp命令詳解 [大] [中] [小]