原创 hbase(七)-region分裂過程

1、RegionServer決定本地的region分裂,並準備分裂工作。第一步是,在zookeeper的/hbase/region-in-reansition/region-name下創建一個znode,並設爲SPLITTIN

原创 hbase(四)-regionserver相關問題

1.hbase讀的過程 1,Client先訪問zookeeper,從meta表讀取region的位置,然後讀取meta表中的數據。meta中又存儲了用戶表的region信息。 2,根據namespace、表名和rowkey

原创 hive對接hbase(一)-配置和使用例子

1.配置 配置hive-site.xml,除了增加hive-hbase-handler-xxx.jar之外,在需要進行一些mapreduce計算的時候計算節點還需要hbase的jar來訪問hbase,還要增加其它hbase訪問的j

原创 hbase(三)-基本的hbase shell命令

HBase 爲用戶提供了一個非常方便的使用方式, 我們稱之爲“HBase Shell”。 HBase Shell 提供了大多數的 HBase 命令, 通過 HBase Shell 用戶可以方便地創建、刪除及修改表, 還可以向表中

原创 Kylin(一)-kylin的介紹及安裝

一、kylin的簡單介紹 kylin是apache的社區的一員,官網地址http://kylin.apache.org/ 最初由ebay開發並貢獻至開源社區。 Apache Kylin™是一個開源的、分佈式的分析型數據倉庫,提供H

原创 樹莓派(三)在樹莓派上安裝下載工具

一、摘要 樹莓派連接上移動硬盤後,可以大大擴展我們的存儲空間。這麼多的空間就可以來下載很多藍光電影,本節來講在樹莓派上安裝下載工具。 二、安裝下載工具 bt工具transmission transmission是一個非常好用的b

原创 樹莓派(四)樹莓派上啓動samba服務

一、摘要 前面幾篇文章講了,給我們的樹莓派掛載上了移動硬盤,安裝了下載工具,下載了很多藍光電影,此時我們只能通過sftp或者ftp來訪問樹莓派,並不是很方便。 當開啓samba服務後,就可以通過samba服務遠程將樹莓派的存儲資源

原创 樹莓派(二)樹莓派裝機

一、準備 鏡像 下載地址 https://www.raspberrypi.org/downloads/ 官方推薦使用raspbian,點擊rapsbian,raspbian按照需求也有不同的版本,如下圖 raspbian裏面

原创 hbase(十)merge region

一、什麼是merge region region的merge和split相對應。 當一個region變得數據量特別大,已經影響到讀寫時,就會把一個region分裂成若干個。 對應merge,region的merge就是將多個reg

原创 hbase(六)-事務併發控制機制原理

作爲一款優秀的非內存數據庫,HBase和傳統數據庫一樣提供了事務的概念,只是HBase的事務是行級事務,可以保證行級數據的原子性、一致性、隔離性以及持久性,即通常所說的ACID特性。爲了實現事務特性,HBase採用了各種併發控制策

原创 hbase(二)-hbase設計以及原理

一、簡介 HBase —— Hadoop Database的簡稱,Google BigTable的另一種開源實現方式,從問世之初,就爲了解決用大量廉價的機器高速存取海量數據、實現數據分佈式存儲提供可靠的方案。從功能上來講,HBas

原创 樹莓派(一)什麼是樹莓派?能吃嗎?

一、簡介 樹莓派(Raspberry Pi),只有信用卡大小的微型電腦,其系統基於Linux。 樹莓派由註冊於英國的慈善組織“Raspberry Pi 基金會”開發,Eben·Upton/埃·厄普頓爲項目帶頭人。2012年3月,英