原创 Redis-3.0.7_初步解析redis-cli

概要 對redis3.0.7內部的一些處理理解不是很清楚,自己根據代碼的調用關係,畫出了簡易的UML圖,粒度把握不全,可能有些地方畫得不對,請指摘。 今天是從redis client的角度來看redis的。跟一般的CLI工具一樣,大體有以

原创 數據集成--Informatica PowerCenter

概要 隨着數據呈現單位級別的遞增,從海量的數據中分析出有價值的數據,對未來的事情進行一些預測,顯得更能體現出BI的優越性了,但這也同時考驗着數據處理ETL的性能和安全。這幾天大體調查了一下informatica公司的PowerCenter

原创 mongoDB——wiredTiger副本集模型的成員角色

      mongoDB的理解,現階段在串聯調查的知識點,以後開始解析代碼,從邏輯層面來再次確認理解不正確或者認識不足的地方。 Replica-set 之前接觸過的NoSQL數據庫,比如:hbase,hive來說,爲了數據的安全性和可

原创 bigdata——HBase+zookeeper+Hadoop集羣構築 之 zookeeper集羣構築

整體流程 zookeeper物件下載物件解壓zoo.cfg文件作成zoo.cfg文件設定dataDir的 ID作成 zookeeper物件 zookeeper官網下載,此處使用的是zookeeper-3.5.1-alpha。 物件解壓

原创 DEBUG——redhat下安裝eclipse&debug redis源碼

背景 今天心血來潮,想看看redis的源碼,嘗試debug一下,找了半天之前的虛擬機,上面卻沒有預先安裝eclispe,對於GCC的調試又不會,思索之下,還是裝個eclipse,雖然本人的JAVA很爛,但調試個C代碼還是有信心的。 物件

原创 不是誰都可以當程序員的

不是誰都可以當程序員的 子:爸,我相當程序員。 父:哦,那你先買40公斤麪粉來! 子:啊?爲什麼?我一個人怎麼搬? 父:自己想辦法。20分鐘之內搞定! 子:時間也太短了吧! 父:還有,不要麪粉了。要低筋粉。還有5分鐘。 子:要求變化多了吧

原创 HBase——關於Region

Region Region是HBase數據管理的基本呢單位。數據的move,數據的balance,數據的split,都是按照region來進行操作的。 region中存儲這用戶的真實數據,而爲了管理這些數據,HBase使用了RegionS

原创 Redis-3.0.7_ubuntu下編譯

背景 回到家,本想接着看源碼,但沒有debug環境,突然想起自己原先將一塊機械硬盤作成了ubuntu14.10,遂下載了redis3.0.7的源碼,準備編譯,然後倒入eclipse中進行DEBUG調試,但在編譯的過程中,出現如下錯誤信息。

原创 Maven編譯apache falcon_win10

背景 白天上班有虛擬機可以折騰,回到家,房子裏的Ubuntu14.10折騰起來比較費勁,好多東西沒有預先安裝,用到什麼的時候在去安裝,在者,房子裏的廣電網絡爛到姥姥家了。 所以決定試試在win10下折騰一下maven+falcon。 事

原创 Mongoose使用案例–讓JSON數據直接入庫MongoDB

爲什麼用Nodejs?爲什麼用MongoDB? 從領域語言和代碼簡潔之道來看,這是我非常關心的問題。 Nodejs基於Javascript,MongoDB腳步同樣也是基於Javascript。而且他們的數據存儲格式都是JSON,這就是爲什

原创 Redis——源碼分析之redis-server

概要 最近一直嘗試去看點心東西,但又沒有目標,想到之前計劃要看的Redis源碼,早上搭建了環境。代碼是在Linux redhat6.5下託管着,在vmware下使用eclipse粘貼複製很不方便,遂使用xmanager工具配合eclip

原创 PostgreSQL黑科技大集會

強烈推薦: 鏈接如下 PostgreSQL黑科技大集會 點贊 收藏 分享 文章舉報 磨刀人 發佈了42 篇原創文章 · 獲贊 12 · 訪問量 13萬+ 私信

原创 bigdata——HBase+zookeeper+Hadoop集羣構築 之 Hbase集羣構築

整體流程 物件下載解壓conf文件配置啓動&停止狀態確認物件下載      參考hbase官網 解壓    tar -zxvf hbase-***.gz conf文件配置 1.hbase-env.shexport JAVA_HOME=/u

原创 bigdata——HBase+zookeeper+Hadoop集羣構築 之 Hadoop YARN集羣構築

最近項目調查閒下來了,有時間讓大腦來整體之前做過的調查,爲了便於基於存檔,遂將其記錄下來,希望對後來者有所幫助。 背景 爲了瞭解Hbase集羣下數據的查詢以及安全性方面的性能數據,需要搭建HBase集羣,簡單測試。 角色分類 +--

原创 程序員三年一跳,爲什麼越跳越好?

如今,人們已經放下了對跳槽的偏見,這是一件好事。 點擊打開鏈接 之前,如果你每幾年換一次工作,人們會覺得你的簡歷上有 “污點”。面試官會覺得你無法勝任一份工作,與同事相處不好,或者你對公司不忠誠,不能承擔任務,等等。這種想法很快就被拋之腦