原创 深入淺出解析Hive?

     Hive是Apache(ASAF)官方提出的一個基於HDFS文件系統的一個外圍小工具。我們稱之爲“數據倉庫”。數據倉庫意思就是存儲數據的地方。實則不然,他並不存儲數據!他的文件數據都存在HDFS上。當然除了HIVE本身的那些元數

原创 ES cerebro插件、x-pack插件的安裝

                                                ES  cerebro插件、X-pack插件的安裝  Cerebro插件是一款非常好用的用來監控es集羣的插件。通過此插件我們可以查看ES集羣

原创 雲環境下,如何快速搭建 ES集羣、實現Kibana Web UI的正常訪問?

 Elasticsearch本文統稱“ES”。很多情況下,因爲工作或者學習需要用到ES集羣,但是自身服務器資源又有限,如何解決此問題呢?這裏用1臺雲服務器,實現ES集羣的搭建並與Kibana實現正常的連接。 第一步:檢查系統環境、軟件環境

原创 ES 下基於scoll+bulk+索引別名實現Java客戶端零停機重建索引 Reindex

      在操作ES的時,我們經常要對其所存的數據進行CRUD。那很多時候,我們會發現因爲數據繁多,可能數據的類型沒有及時發現進而已經被ES  Dynamic Mapping了。但是我們知道,在ES裏,Mapping一旦設定,field

原创 Elasticsearch 、Head插件的安裝

Elasticsearch以下簡稱爲ES。 本文以目前系統Linux CentOS 7.6 ,ES 版本爲6.8.2爲列。來講述ES6版本的不同之處。 系統版本:Linux Centos 7.6 ES 版本、JDK版本依次如下圖所示:

原创 ES 6.x版本Bigdesk插件的安裝

    Bigdesk插件是Elasticsearch的一個集羣監控工具。它可以來查看ES集羣的各種狀態,如CPU、內存使用情況、索引數據、搜索情況,http連接數等。因爲在ES5.x版本後,Es的插件不再直接作爲plugin插件直接安裝

原创 Hadoop 平臺僞分佈式模式的構建部署過程?!值得推薦!!

        Hadoop 平臺僞分佈式模式的構建部署過程?!值得推薦!! 前言:      大數據也就是"Big data",那麼是什麼是大數據呢?筆者認爲就是海量數據,非常多的數據的意思。那麼大數據爲啥在這幾年又會如此之火呢?主要還

原创 《思考:贏在當下》

    此時此刻,孩子們都睡了,我也有了自己的專屬時間。看着我這滿腹便便都是油的肚子,我又多麼希望裏面全是筆墨紙硯。真是愛恨交織,只可惜歲月不饒人呀。年輕的時候總是覺得時間大把,殊不知,轉眼就10年。       還是要及時當勉勵,贏在當

原创 Logstash 7.4配置轉發器報錯提示:“[ERROR][logstash.agent] Failed to execute ction {:action=>LogStash::Pipel”原因

                    Logstash 7.4轉發器的配置啓動報錯的解決過程 經過修改配置文件,執行以下命令啓動服務 nohup bin/logstash -f config/kafka_os_into_es.conf

原创 Linux 內網環境(沒有外網)下如何實現某種服務的快速安裝?

Linux 內網環境(沒有外網)下如何實現某種服務的快速安裝? 一、 實際情況描述: 由於公司實際需要在公安內網安裝MySQL數據庫備份工具Xtrbackuup,原來我們都是通過Yum安裝。那麼這裏沒有網絡環境,怎麼辦呢?這裏有兩