原创 java程序員面試交流項目經驗

  1:請你介紹一下你自己 這是面試官常問的問題。一般人回答這個問題過於平常,只說姓名、愛好、工作經驗,這些簡歷上都有。其實,面試官最希望知道的是求職者能否勝任工作,包括:最強的技能、最深入研究的知識領域、個性中最積極的部分等。 2:說說

原创 org.xml.sax.SAXParseException: Document root element "beans", must match DOCTYPE root "null".

嚴重: Exception sending contextinitialized event to listener instance of class org.springframework.web.context.ContextLoa

原创 Oracle的model用法簡介

 Model語句是Oracle 10g的新功能之一。 本文通過一些簡單的例子幫助理解Model語句的用法,複雜使用場景請參考其他文章。   環境:當然需要Oracle 10g以上,本人是在11g上測試的。   1. 什麼是model語句

原创 hadoop hbase hive 常見問題解決

安裝過程中,由於網絡終端,導致下面問題: 問題1:安裝停止在獲取安裝鎖   /tmp/scm_prepare_node.tYlmPfrT usingSSH_CLIENT to get the SCM hostname: 172.16.

原创 HBase Coprocessor 之 endpiont(hbase 0.96.0)

好文章。收藏下 本文是基於hbase 0.96.0 測試的,理論上支持hbase 0.94 以上版本!! HBase有兩種協處理器(Coprocessor) 1、RegionObserver :類似於關係型數據庫的觸發器 2

原创 ganglia收集hbase的metrics

Ganglia 是 UC Berkeley 發起的一個開源監視項目,設計用於測量數以千計的節點。每臺計算機都運行一個收集和發送度量數據(如處理器速度、內存使用量等)的名爲 gmond 的守護進程。它將從操作系統和指定主機中收集。接收所有度

原创 Win7 Eclipse調試Centos Hadoop2.2-Mapreduce

  一. 自己搭建開發環境      今天自己搭建了一套Centos5.3 + Hadoop2.2 + Hbase0.96.1.1的開發環境,Win7 Eclipse調試MapReduce成功。可能是版本比較高的原因,出了問題,網上找不到

原创 Hadoop集羣內lzo的安裝與配置

爲了配合部門hadoop平臺測試,作者詳細的介紹瞭如何在Hadoop平臺下安裝lzo所需要軟件包:gcc、ant、lzo、lzo編碼/解碼器並配置lzo的文件:core-site.xml、mapred-site.xml。希望對大家有所幫助

原创 Tomcat 7.0.3x 啓動慢並且遇到StackOverflowError的異常的解決辦法

之前使用tomcat7時遇到啓動報錯問題,日誌如下: Dec 09, 2014 5:25:04 PM org.apache.catalina.core.ContainerBase startInterna

原创 高低位字節序

什麼是Big Endian和Little Endian? 來源:http://blog.ednchina.com/qinyonglyz/194674/message.aspx 1.故事的起源 “endian”這個詞出自《格列佛遊記》。

原创 mapreduce中控制mapper的數量

很多文檔中描述,Mapper的數量在默認情況下不可直接控制干預,因爲Mapper的數量由輸入的大小和個數決定。在默認情況下,最終input佔據了多少block,就應該啓動多少個Mapper。如果輸入的文件數量巨大,但是每個文件的size都

原创 shell編程——if語句

if  條件 then  Command else  Commandfi                              別忘了這個結尾 If語句忘了結尾fi test.sh: line 14: syntax error: 

原创 Java編程中“爲了性能”儘量要做到的一些地方

1. 儘量在合適的場合使用單例 使用單例可以減輕加載的負擔,縮短加載的時間,提高加載的效率,但並不是所有地方都適用於單例,簡單來說,單例主要適用於以下三個方面: 第一,控制資源的使用,通過線程同步來控制資源的併發訪問; 第二,控制實例的

原创 MapReduce任務參數調優

本文主要記錄Hadoop 2.x版本中MapReduce參數調優,不涉及Yarn的調優。 Hadoop的默認配置文件(以cdh5.0.1爲例): core-default.xmlhdfs-default.xmlmapred-default

原创 hive優化之 控制hive任務中的map數和reduce數

  一、    控制hive任務中的map數: 1.    通常情況下,作業會通過input的目錄產生一個或者多個map任務。  主要的決定因素有: input的文件總個數,input的文件大小,集羣設置的文件塊大小(目前爲128M, 可