原创 大數據中數據量打底有多大?

       先看下計量單位之間的換算:        1KB (Kilobyte 千字節)=1024B,        1MB (Megabyte 兆字節 簡稱“兆”)=1024KB,        1GB (Gigabyte 吉字

原创 Hadoop中SSH免密碼登陸設置

1、關閉Linux防火牆 setup                               設置防火牆狀態 service iptables status    查詢防火牆狀態 2、設置Linux中的DNS 進入gedit /etc

原创 ETL架構師面試題(五)

 建立映射 一.什麼是代理鍵?簡述代理鍵替換管道如何工作。        在維度表的遷移過程中,有一種處理方式是使用無意義的整型值分配給維度記錄並作爲維度記錄的主鍵,這些作爲主鍵的整型值稱爲代理鍵(Surrogate Key)。使用代

原创 工作狂的悲哀

        工作狂並不是英雄。他們沒有工作要領,沒有力挽狂瀾,他們浪費了大量的時間製造問題靠蠻力來彌補思維上的惰性,關注了大量次要的細節,把自己搞得筋疲力盡,沒有任何決策能力,真正的英雄早已想出辦法、搞定一切、然後回家!

原创 ETL架構師面試題(八)

 實時ETL 一.簡述在架構實時ETL時的可以選擇的架構部件。        在建立數據倉庫時,ETL通常都採用批處理的方式,一般來說是每天的夜間進行跑批。        隨着數據倉庫技術的逐步成熟,企業對數據倉庫的時間延遲有了更高的

原创 javascript方法大收集

javascript方法大收集 轉載: http://www.woween.com/f2e/2013/08/26/javascript-method-to-collect.html JS表單驗證大全 鏈接: http://www.

原创 ETL架構師面試題(七)

 優化/操作 一.簡述數據倉庫中的表的基本類型,以及爲了保證引用完整性該以什麼樣的順序對它們進行加載。        數據倉庫中的表的基本類型有維度表、事實表、子維度表、橋接表等幾類。其中子維度表即雪花模型由支架維度技術處理,橋接表用

原创 ETL架構師面試題(六)

元數據 一.舉例說明各種ETL過程中的元數據。        元數據是ETL項目組面對的一個非常重要的主題,對於整個數據倉庫項目也是非常重要的一部分。對於元數據的分類和使用沒有很確定的定義。        通常來說,我們可以把元數據分

原创 Excel數據導入到oracle數據庫

1、將Excel文件保存爲*.CSV格式。 2、新建一個*.ctl文件,代碼如下: load data infile 'd:\*.csv' append into table student fields terminated by '

原创 軟件質量管理01

 質量入門介紹 根據國際標準組織(ISO)的定義,質量是依靠特定的或暗指的能力滿足特定需要的產品或服務的全部功能和特徵。這個定義說明了質量是產品的內在特徵,描繪了產品的質量觀點。 質量觀點 開發人員的質量觀點,這直接影響到選擇最終產品

原创 Git全過程(一)

 一、Git 簡介       Git是Linus用C實現的一個分佈式版本控制工具,注意這裏對分佈式的強調。不同於Git,像Perforce、SVN和CVS這類版本控制工具都是集中式的。 下面大概介紹下集中式版本控制工具和分佈式版本控

原创 Git 10 週年訪談:Linus 講述背後故事

 你爲什麼要開發 Git? Torvalds:我從來沒有想過去做版本控制軟件,因爲在我看來那是計算機世界裏最無聊的事了(如果數據庫除外的話 ;^),我天生就不喜歡 SCM。但是 Bitkeeper 的誕生改變了我對版本控制的認識。BK

原创 Git in 600 words

原文英文地址:http://maryrosecook.com/blog/post/git-in-six-hundred-words Git源碼地址:https://github.com/maryrosecook/gitlet Git使用參

原创 推薦7本書201505

 1.《奇特的一生》 [蘇] 格拉寧 著 推薦理由:最好也最難的時間統計法 2. 《重來》 [美] 賈森·弗裏德 [丹] 戴維·海涅邁爾·漢森 著 推薦理由:清醒、精簡、敏捷的工作思維 3.《把時間當作朋友》 李笑來 著 推薦理由:專

原创 Git全過程(三)

 五、Git分支 在代碼版本控制工具中,都會有branch的概念。剛開始建立版本倉庫的時候,我們只有一個主分支(master branch),我們不可能把日常的新功能開發、代碼優化以及bug修復等概念工作全都放在主分支上,這樣會使主分