原创 資料下載 | 58同城HBase平臺及生態建設實踐

前言:2020年3月7日晚7點,大佬張祥在微信羣向大家詳細介紹了58同城HBase平臺及其生態的建設實踐與相關經驗,確實講得很好。今天花了點時間幫大家整理了一下,希望更多的沒有參與直播的朋友能夠看到它,也歡迎大家積極轉發一下,視頻與PPT

原创 使用ElasticSearch賦能HBase二級索引 | 實踐一年後總結

前言:還記得那是2018年的一個夏天,天氣特別熱,我一邊擦汗一邊聽領導大刀闊斧的講述自己未來的改革藍圖。會議開完了,核心思想就是:我們要搞一個數據大池子,要把公司能灌的數據都灌入這個大池子,然後讓別人用 各種姿勢 來撈這些數據。系統從開始

原创 讀者來信 | 如何判斷HBase Major Compact是否執行完畢?(已解決)

前言:之前有朋友加好友與我探討一些問題,我覺得這些問題倒挺有價值的;於是就想在本公衆號開設一個問答專欄,方便技術交流與分享,專欄名就定爲:《讀者來信》。歡迎關注本人微信公衆號《HBase工作筆記》,掃描文末二維碼解鎖更多姿勢! 來信人:

原创 HBase 監控 | HBase Metrics 初探(一)

前言:對於任意一個系統而言,做好監控都是非常重要的,HBase也不例外。經常,我們會從JMX中獲取相關指標來做展示、對HBase進行監控,那這些指標是怎麼生成的呢?如果你想自定義自己的監控指標又該怎麼做呢?基於好奇之心和學習的目的,最近打

原创 讀者來信 | 設置HBase TTL必須先disable表嗎?(已解決)

今日有朋友加好友與我探討一些問題,我覺得這些問題倒挺有價值的;於是就想在本公衆號開設一個問答專欄,方便技術交流與分享,專欄名就定爲:《讀者來信》。如遇到本人能力有限難以解決的問題,該貼將會被轉發至我的資源圈尋求大佬們出手幫助,並附上提問者

原创 zookeeper的java api操作

zookeeper的java api操作 創建會話: Zookeeper(String connectString,int sessionTimeout,Watcher watcher) Zookeeper(String connec

原创 Zookeeper概述、特點、數據模型

Zookeeper 1.Zookeeper概述 Zookeeper是一個工具,可以實現集羣中的分佈式協調服務。 所謂的分佈式協調服務,就是在集羣的節點中進行可靠的消息傳遞,來協調集羣的工作。   Zookeeper之所以能夠實現分佈

原创 HBase Shell Get 操作常用小技巧

在工作中,有時候只是想簡單看下HBase表某些關鍵指標的值,這個時候總不能現寫Java代碼去查看,以下幾個小技巧你可能會經常用到。 1. 某行有許多列,只想獲取指定2~3列的數據 hbase> get 't1', 'r1', ['f:c1'

原创 zookeeper集羣的搭建

zookeeper集羣的搭建 需要先安裝jdk,並且配置jdk的環境變量   下載zookeeper的安裝包 上傳到linux集羣環境下 解壓安裝包 tar -zxvf zookeeper-3.4.7.tar.gz 進入conf

原创 讀者來信 | 如果你家HBase集羣Region太多請點進來看看,這個問題你可能會遇到

前言:《讀者來信》是HBase老店開設的一個問答專欄,旨在能爲更多的小夥伴解決工作中常遇到的HBase相關的問題。老店會盡力幫大家解決這些問題或幫你發出求救貼,老店希望這會是一個互幫互助的小平臺。有問題請直接在老店後臺留言,有好的解決方案

原创 zookeeper原理

zookeeper原理 zookeeper爲了保證可靠性,不能用一臺機器,而應該是一個集羣   爲了保證zookeeper集羣數據能夠一致,必須有一個拍板說了算的人,這就是leader,其他的是follower。 某一時刻集羣裏只能有

原创 zookeeper的shell下操作

zookeeper的shell下操作 進入%ZK_HOME%/bin 執行zkCli.sh [-server ip:port] #如不指定,則連接本機   創建: create [-s] [-e] path data acl #創建

原创 sqoop概述

sqoop 溝通hdfs和關係型數據庫的橋樑,可以從hdfs導出數據到關係型數據庫,也可以從關係型數據庫導入數據到hdfs        下載:Apache 提供的工具        安裝:            要求必須有jdk 和 ha

原创 HIVE的UDF

HIVE的UDF    新建java工程,導入hive相關包,導入hive相關的lib。    創建類繼承UDF    自己編寫一個evaluate方法,返回值和參數任意。    爲了能讓mapreduce處理,String要用Text處理

原创 讀者來信 | 剛搭完HBase集羣,Phoenix一啓動,HBase就全崩了,是什麼原因?(已解決)

前言:之前有朋友加好友與我探討一些問題,我覺得這些問題倒挺有價值的;於是就想在本公衆號開設一個問答專欄,方便技術交流與分享,專欄名就定爲:《讀者來信》。如遇到本人能力有限難以解決的問題,我將轉發該文至我的資源圈盡力尋求大佬們出手幫助,並附