原创 大數據:從入門到XX(二)

      想了解APACHE 項目是怎麼分類,又或者想了解APACHE項目是用什麼語言開發的,直接訪問APACHE官網中的By Category和By Programming Language就可以了,但是如果想同時看到每個項目的分類信息

原创 開源軟件與知識產權

目錄1.      軟件與知識產權... 21.1.      引言... 21.2.      著作權法與軟件... 32.      開源軟件概述... 32.1.      自由軟件運動... 32.2.      開源軟件的發展..

原创 大數據:從入門到XX(七)

     hadoop官網關於HDFS HA包括兩種方式:QJM(quorum journal manager) 和 NFS,本文檔只考慮QJM一種方式的部署,NFS方式可以參考文檔(HA with NFS)。HDFS HA(namenod

原创 大數據:從入門到XX(十)

        開始準備安裝hive2.1.0了,hive的安裝涉及到元數據-metastore存儲的問題,hive元數據支持多種數據庫,此處只考慮一般的mysql數據庫。首先查詢hive2.1.0相關的元數據庫兼容性要求,訪問hive的w

原创 大數據:從入門到XX(五)

    hadoop集羣模式安裝是僞集成模式安裝的繼續,部分配置信息需要參照前述文檔。    This document does not cover advanced topics such as Security or High Ava

原创 JAVA7運行時數據區圖解

最全、最完整的JAVA7運行時數據區圖解,每個部分均包含簡要說明,組成部分包括:    線程共享區域        方法區、運行時常量池、JAVA堆、直接內存    線程私有區域        PC寄存器、本地方法棧、JVM棧【棧幀【局部變

原创 大數據:從入門到XX(一)

   因爲不小心被大數據撞了一下腰,這兩天有點小鬱悶,前思後想了一番,還是決定在工作之餘,臨時抱抱大數據的佛腳,以備吹牛之用。   大數據到底現在有多熱呢,沒有研究就有發言權哪,還是看看國家權威發佈吧。我上網查了一下,發現主席在2014年的

原创 大數據:從入門到XX(三)

    對APACHE的開源項目做了一個簡單的分析之後,下一步就是去一窺hadoop的真容了。直接訪問HADOOP官網地址,這裏就是學習hadoop的官方渠道了,以下內容摘自官網:    What Is Apache Hadoop?    

原创 ECLIPSE實用快捷鍵大全

        eclipse常用快捷鍵分類彙總,實用快捷鍵一網打盡        另外還包括了vi插件帶來的快捷鍵        爲了使用更加順手,對部分快捷鍵進行了自定義變更        部分快捷鍵經常感覺失效可能和光標位置有關係,描

原创 大數據:從入門到XX(六)

什麼是ZooKeeper,看看ZooKeeper官網怎麼說:    Apache ZooKeeper is an effort to develop and maintain an open-source server which enab

原创 大數據:從入門到XX(四)

    Hadoop Local (Standalone) Mode(單機版)的安裝純粹只是爲練手,練完了單機版,下面該練練Pseudo-Distributed Mode(僞分佈式版)的安裝了。僞分佈式是在一臺物理機上模擬實現了hadoop

原创 大數據:從入門到XX(八)

        暫停了好長一段時間,終於可以繼續大數據的學習了,今天要學習的是HDFS集羣自動故障切換的知識,學習本部分內容,需要提前瞭解ZooKeeper和HDFS HA QJM相關知識點。               Apache Zo

原创 大數據:從入門到XX(九)

        The ResourceManager (RM) is responsible for tracking the resources in a cluster, and scheduling applications (e.