原创 在Centos6.5版本分佈式安裝Glusterfs3.8版本

1. 登入root用戶 sudo su root   2. 設置主機名 修改hostname文件,以及hosts文件添加如下設置,使集羣中的主機可以通過主機名進行訪問: 10.0.101.2 gfs1 10.0.101.191 gfs2

原创 ELK日誌平臺搭建logstash+elasticsearch+redis+Kibana

安裝redis 首先下載redis wget http://download.redis.io/releases/redis-3.0.4.tar.gz 下載之後解壓,編譯安裝 tar -zvxf redis-3.0.4.tar.gz ma

原创 使用SecureCRT等工具時如何讓Kibana一直後臺運行

在搭建ELK平臺時,因爲我一般使用CRT進行SSH連接,但是因爲Kibana是解壓安裝,所以當我們關閉SSH連接後程序就結束了,要想讓程序在後臺運行,我們可以使用nohup命令 [root@hdp5 kibana-4.1.2]# nohu

原创 Hue整合Mysql數據庫的安裝配置

前言:在泰國,一個全新的應用程序允許查看MySQL、PostgreSQL、Oracle和Sqlite的數據。受Beeswax應用程序的啓發,它允許您查詢關係數據庫並在表中查看它。在hue的hue.ini配置文件中添加mysql,定位到da

原创 Linux升級glibc庫至2.15版本的快速解決辦法

首先下載2.15所需的各種安裝包如下: rpm -Uvh glibc-2.15-60.el6.i686.rpm \ glibc-devel-2.15-60.el6.i686.rpm \ glibc-utils-2.15-60.el6.x

原创 Linux中出現libc.so.6(GLIBC_2.14)(64bit) is needed by...的解決辦法

原因是因爲系統的glibc版本不符合安裝要求,可以對glibc進行升級。 下載響應安裝包:http://ftp.gnu.org/gnu/glibc/glibc-2.14.tar.gz。   解壓: tar xvf glibc-2.14.t

原创 kafka原理深入剖析和研究,kafka原理詳細解讀

一、爲什麼需要消息系統 1.解耦:   允許你獨立的擴展或修改兩邊的處理過程,只要確保它們遵守同樣的接口約束。 2.冗餘:   消息隊列把數據進行持久化直到它們已經被完全處理,通過這一方式規避了數據丟失風險。許多消息隊列所採用的"插入-

原创 zookeeper概念詳細解答——終極篇

本人曾經使用過 ZooKeeper 作爲 Dubbo 的註冊中心,另外在搭建 Solr 集羣的時候,我使用到了 ZooKeeper 作爲 Solr 集羣的管理工具。 前幾天,總結項目經驗的時候,我突然問自己 ZooKeeper 到底是個什

原创 個人學習日常bug總結-log4j:WARN Please initialize the log4j system properly.

log4j:WARN No appenders could be found for logger (com.netease.qa.testng.TestngRetry). log4j:WARN Please initialize the

原创 學習--Hbase 行鍵設計(rowkey) 實現多條件查詢

HBASE的使用跟業務邏輯有很強的關聯性,就像本文裏提到的例子使用ElasticSearch更合適。HBASE適合那種使用key-value模式的快速查詢,多字段查詢還是不適合它。  所以大家如果看本文的話,就全當是加深對hbase過濾器

原创 ElasticSearch 集羣是如何保證數據的一致性和實時性?

1. 當我們在說一致性,我們在說什麼? 在分佈式環境下,一致性指的是多個數據副本是否能保持一致的特性。 在一致性的條件下,系統在執行數據更新操作之後能夠從一致性狀態轉移到另一個一致性狀態。 對系統的一個數據更新成功之後,如果所有用戶都能夠

原创 Elasticsearch Reindex性能提升改良

1、reindex的速率極慢,是否有辦法改善? 以下問題來自社區:https://elasticsearch.cn/question/3782 問題1:reindex和snapshot的速率極慢,是否有辦法改善? reindex和snap

原创 【閒時分享】2019最新最全分類抖音熱門音樂全合集37.61G

2019最新最全分類抖音熱門音樂全合集37.61G 某寶買的,還是比較全的音樂 地址:http://www.kgraph.cn/detail.html?id=UFTYW2kBcGPkXi2vIyM_&i=game

原创 Apache jena SPARQL endpoint 實踐異常解決

1. 在linux下部署的,發現了一個問題:fuseki-server進程結束過一次(kill或者是ctrl+z或者是終端被關掉),再次啓動時會報錯:DatasetPrefixesTDB WARN Mangled prefix map:

原创 ElasticSearch6.2.3 Java Client 連接安裝Xpack的ES集羣的Bug問題

ES集羣安裝X-pack之後java client連接報錯: Settings settings = Settings.builder() .put("cluster.name", Config.clus