原创 Github下載代碼與常用命令

clone下載代碼:1,登錄git hub 找打你要下載的代碼倉庫地址 2,拷貝地址,然後到本地命令窗口執行 cd git_hub 目錄,然後繼續執行git clone xxx.git,靠實現倉庫的克隆。 3,代碼提交:        

原创 zookeeper集羣安裝手冊

1,修改 zookeeper-3.4.5/conf目錄下面的zoo_sample.cfg爲zoo.cfg 。 通過命令 : mv zoo_samp

原创 solr更新schema.xml後,重新把配置文件注入到zookeeper

1,solr更新schema.xml後,重新把配置文件注入到zookeeper: ./zkcli.sh -z Master.Hadoop:2181 -cmd putfile /solr/configs/poi_index_update/

原创 eclipse在線安裝ivy和ivyde

在eclipse配置Ivy外加lib管理工具 , 用來導入項目需要的lib包 這個工具可以指定需要那個lib,定義在xml裏之後,ivy就會自動幫你添加外部包 很方便! 步驟: 1. 下載資源 (可能出問題,多google 、多

原创 Solr常用命令

1,./solr start -noprompt 單機啓動solr 2,集羣方式啓動:./solr -c -p 8983 -z Master.Hadoop:2181 -s /home/solr-5.3.0/server/solr_nav

原创 Storm環境搭建注意事項

去官網下載最新版本的storm:http://storm.apache.org/downloads.html 搭建可以參考該文章:     http://www.aboutyun.com/thread-6854-1-1.html

原创 eclipse設置反編譯

1,下載http://sourceforge.net/projects/jadclipse/files/jadclipse3.3/對應的反編譯jar包 2,下載jad.exe      將net.sf.jadclipse_3.3.0.ja

原创 eclipse基於ant的build.xml搭建項目

1,new->project->java project from existing ant buildfile然後選擇build.xml點擊finlsh項目搭建完成

原创 Nutch2.3+Hbase0.94環境搭建

1,修改nutch-site.xml  <property>      <name>storage.data.store.class</name>      <value>org.apache.gora.hbase.store.HBase

原创 linux top命令詳解

top命令是Linux下常用的性能分析工具,能夠實時顯示系統中各個進程的資源佔用狀況,類似於Windows的任務管理器。下面詳細介紹它的使用方法。 top - 01:06:48 up 1:22, 1 user, load averag

原创 SOLR安裝簡單配置

1,從官網下載solr最新安裝包:http://lucene.apache.org/solr/downloads.html 2,解壓壓縮包,修改bin目錄下的solr.in.sh配置文件:     a,SOLR_JAVA_HOME=$JA

原创 zookeeper3.4.5自動清理日誌

 zookeeper3.4.5自動清理日誌 從3.4.0開始,zookeeper提供了自動清理snapshot和事務日誌的功能, 通過配置 autopurge.snapRetainCount 和 autopurge.purgeI

原创 rpm命令彙總

RPM是RedHat Package Manager(RedHat軟件包管理工具)類似Windows裏面的“添加/刪除程序” rpm 執行安裝包 二進制包(Binary)以及源代碼包(Source)兩種。二進制包可以直接安裝在計算機中

原创 Nutch基本命令

1:nutch讀取hbase數據導出文本文件:./nutch readdb -dump /data/nutch_db/1108 -crawlId TestCrawl -content 會執行一個mr程序,/data/nutch_db/11

原创 zookeeper適用場景:zookeeper解決了哪些問題

問題導讀:1.master掛機,傳統做法備份必然是以前數據,該如何保證掛機數據與備份數據一致?2.分佈式系統如何實現對同一資源的訪問,保證數據的強一致性?3.集羣中的worker掛了,傳統做法是什麼?zookeeper又是如何做的?分佈式