原创 Hadoop-2.2.0集羣安裝配置實踐

Hadoop 2.x和1.x已經大不相同了,應該說對於存儲計算都更加通用了。Hadoop 2.x實現了用來管理集羣資源的YARN框架,可以面向任何需要使用基於HDFS存儲來計算的需要,當然MapReduce現在已經作爲外圍的插件

原创 ExtJs4 筆記 layout 佈局

本篇講解Ext另一個重要的概念:佈局。一般的容器類控件都是通過配置項items添加子控件的,這些子控件相對於父控件怎麼定位呢,這裏就要用到佈局。某些容器類控件,它本身默認就集成了一種佈局方式,例如比較典型的是:Ext.containe

原创 用Artifactory管理內部Maven倉庫

1. 介紹   Maven是Java開發者中流行的構建工具,Maven的好處之一是可以幫助減少構建應用程序時所依賴的軟件構件的副本,Maven建議的方法是將所有軟件構件存儲於一個叫做repository的遠程倉庫中。   M

原创 Hadoop2.4.1部署(完整版)

引言       轉眼間,Hadoop的stable版本已經升級到2.4.1了,社區的力量真是強大!3.0啥時候release呢?       今天做了個調研,嚐鮮了一下2.4.1版本的分佈式部署,包括NN HA(目前已經部署好了2.

原创 Apache Hadoop 2.2.0 HDFS HA + YARN多機部署

部署邏輯架構: HDFS HA部署物理架構 注意: JournalNode使用資源很少,即使在實際的生產環境中,也是把JournalNode和DataNode部署在同一臺機器上; 生產環境中,建議主備Name

原创 NN HA 對於 Client 透明的實驗

之前轉載過一篇【伊利丹】寫的NN HA實驗記錄,該博客描述了主備NN透明切換的過程,也就是說,當主NN掛掉後,自動將備NN切換爲主NN了,Hadoop集羣正常運行。 今天我繼續做了一個實驗,目的是實現NN的切換不會對Client端程序

原创 hadoop MapReduce實例解析

1、MapReduce理論簡介   1.1 MapReduce編程模型   MapReduce採用"分而治之"的思想,把對大規模數據集的操作,分發給一個主節點管理下的各個分節點共同完成,然後通過整合各個節點的中間結果,得到最終結果

原创 Eclipse+Maven創建webapp項目<二>

1、開啓eclipse,右鍵new——》other,如下圖找到maven project   2、選擇maven project,顯示創建maven項目的窗口,此次不勾選Create a simple project,直接nex

原创 Hadoop數據傳輸工具sqoop

概述 sqoop是Apache頂級項目,主要用來在Hadoop和關係數據庫中傳遞數據。通過sqoop,我們可以方便的將數據從關係數據庫導入到HDFS,或者將數據從HDFS導出到關係數據庫。 sqoop架構: sqoop架構非常簡單,其整

原创 Maven筆記(四)– eclipse+tomcat構建web工程

RockCMS內容管理系統是一個web應用,因此我們要利用Maven構建一個web應用,開發環境爲eclipse+tomcat。構建過程如下: 1、工具準備 eclipse:版本爲eclipse 4.2(Juno Service

原创 eclipse 配置maven web項目

maven是個項目管理工具,集各種功能於一身,下面介紹maven web項目在eclipse種的配置,並於tomcat集成。配置成功後,可以跟一般的web項目一樣調試。   一、準備條件 1、安裝下載jdk      這裏以jd

原创 Eclipse+Maven創建webapp項目<一>

1、開啓eclipse,右鍵new——》other,如下圖找到maven project 2、選擇maven project,顯示創建maven項目的窗口,勾選如圖所示,Create a simple project 3、輸

原创 Spring Security 3.x 完整入門教程

本Blog所有內容不得隨意轉載,版權屬於作者所有。如需轉載請與作者聯繫( [email protected]    QQ:9184314)。 未經許可的轉載,本人保留一切法律權益。Spring Security 3.x 出來一段時間了,跟A

原创 VMware虛擬機配置Ubuntu橋接方式(Bridged)使虛擬機和宿主機能互相ping通

1、設置Bridged上網方式 Vmware菜單欄VM->settings->Network Adapter或者Ctrl+D 2、查看Bridged狀態 Vmware菜單欄Edit->Virtual Network Editor 要

原创 Spring3+Hibernate4+SpringMVC整合Ext:JSON數據格式傳輸

前言 前兩篇文章介紹了Spring3、Hibernate4、SpringMVC的整合以及Ext界面MVC的實現,這次介紹的內容是處理Ext的分頁和前後臺的數據傳輸。 目前Ext大部分組件使用的都是JSON數據格式(如果有不知道J