原创 安裝elasticalert配置驗證文檔
docker 安裝、配置、驗證ElasticAlert created by fangchangtan | 2020/2/24 1.elastalert的場景用途 elastalert組件作爲elk中日
2020-07-07 00:27:52
54
原创 DCOS搭建zookeeper集羣搭建
dcos上zookeeper集羣搭建 參考地址：https://my.oschina.net/dslcode/blog/1944775 1.在docs上構建zookeeper服務的json腳本 { "id": "/compone
2020-07-07 00:27:52
原创 使用docker搭建kafka-lenses
今天發現一個好東西！一鍵搭建kafka+zookeeper+kafka監控； kafka-lenses實現一鍵搭建kafka+zookeeper+kafka監控 一、問題背景 常規的搭建方法，需要分別搭建kafka服務、zook
2020-07-07 00:27:52
1
原创 confluence遷移，與jira同步賬戶遇到的權限問題
一、問題場景 需要將外網中的confluence和jira全部遷移到內網中，即在內網中安裝jira和confluence，激活，並遷移外網數據到內網中； 二、問題描述： 在將confluence中，將jira的賬戶同步到confl
2020-05-15 19:53:46
原创 docker安裝redis-dump工具
離線安裝redis-dump工具 1 場景和問題 1.1 redis-dump工具作用 redis-dump可以將redis數據庫中的各個slot中的數據導出到文本中，方便遷移備份數據； 1.1 爲什麼採用redis-d
2020-04-13 19:52:37
原创 redis導入導出工具-redis-dump,centos7安裝使用
redis導入導出工具-redis-dump,centos7安裝使用 在centos7上安裝redis的備份工具redi-dump 注意事項： 因爲多數系統自帶的ruby版本是2.0.0的版本，但是redis-dump需要2.2.
2020-02-27 18:00:19
3
原创 Elasticsearch關鍵知識點總結
Elasticsearch，在筆記本上寫下了如下記錄： 反向索引又叫倒排索引，是根據文章內容中的關鍵字建立索引。 搜索引擎原理就是建立反向索引。 Elasticsearch 在 Lucene 的基礎上進行封裝，實現了分佈式搜索引
2020-02-20 14:45:07
原创 sonarqube中 項目名稱 問題
關於使用sonarqube中的注意事項 （1）如果項目中的名稱不是你想要的名稱 圖1 兩個tms項目，將tms改爲CSS-TMS 注意修改代碼中的工程項目名稱即可 （2）如果想要設置同一個項目在sonar
2020-02-20 14:45:07
原创 elasticsearch的知識點歸納
es的基本概念：索引、類型、文檔； 倒排索引的原理； elasticsearch集羣節點、分片； 對es的寫過程（寫入【重要】、刪除、更新）、讀過程（重要）； es中搜索中涉及的算法； 後期持續補充知識 點贊
2020-02-20 14:45:07
原创 記一次spark中task卡頓引發的血案
記一次spark中task卡頓引發的血案 背景介紹： 由於spark-steaming中其中一個job中某個task卡頓，導致平均30s的平均處理時間的task，整整耗費了10個小時。 問題的排查差不多花費了一週的時間，可以說爲解
2020-02-20 14:45:07
原创 docker下es的堆內存設置
由於需要增大es的內存，從1g到2g docker下es的堆內存設置 網上搜到的是這個 但是不生效啊，後期使用如下:(若是在dcos雲平臺上使用的) 提示注意：不能加等號=符號；並且不能雙引號""。 特此記一下。
2020-02-20 14:45:07
原创 14 ，java 操作 s3 ( 詳細教程 )
14 ，java 操作 s3 ( 詳細教程 ) https://blog.csdn.net/qq_34319644/article/details/101072107 ceph s3 對象的上傳和刪除(JAVA demo) htt
2020-02-20 14:45:07
原创 (executor 1 exited caused by one of the running tasks) Reason: Executor heartbeat timed out after
WARN TaskSetManager: Lost task 44.0 in stage 1368.0 (TID 17283, 172.19.32.66, executor 1): ExecutorLostFailure (exe
2020-02-20 14:45:07
原创 Spark streaming動態調整資源-調研報告
Spark streaming動態調整資源調研報告 一、需求背景: 我們希望spark streaming根據不同時間段的數據量不同（例如高峯期和低谷期），自動調整spark的計算資源（包含CPU和memory大小）。從而，可以在
2020-02-20 14:45:07
原创 com.mongodb.MongoSocketReadException: Prematurely reached end of stream
異常情況描述com.mongodb.MongoSocketReadException: Prematurely reached end of stream 一、異常發生場景 當使用mongodb的一主一從一備節點構建的集羣，使用j
2019-10-25 13:21:58
20