原创 掌握Docker高頻操作

掌握Docker高頻操作 以Docker爲代表的輕量級容器技術的角度來審視完全虛擬化技術,虛擬機系統既浪費資源又難以管理,更重要的是還不安全。 讓Docker爲我們工作 沒有Docker鏡像,Docker什麼也幹不了,幸運的是,D

原创 docker下postgis12+postgis3.0搭建

docker下postgis12+postgis3.0搭建 1.目的 本來想找一個postgis3.0的鏡像,由於postgis3.0是最新的版本(2019/10/20發佈正式版),網上鏡像很少,寫出來放置自己忘了。 2.過程 g

原创 安裝redis-dump命令

安裝redis-dump命令 我是在centos7上執行的 1.安裝redis-dump執行的shell腳本如下: #!/bin/bash #首先到tmp下,用來存放下載的安裝文件 cd /tmp mkdir rvm cd rv

原创 Kafka保證消息不丟失

Kafka保證消息不丟失 kafka保證消息不丟失,需要從三個方面考慮: 生產者端消息不丟失 kafka服務器broker本身消息不丟失 消費者端消息不丟失 這篇文章對最新發送kafka數據丟失的情況做一個總結。 1.爲什麼要

原创 java批量創建刪除Kafka的topic

java批量創建刪除Kafka的topic 一、前言 參考資料:Kafka 0.11客戶端集羣管理工具AdminClient https://blog.csdn.net/u012501054/article/details/805

原创 elk消費kafka數據延遲過大的問題

elk消費kafka數據延遲過大的問題 1.問題現象表述: 當前elk作爲日誌系統消費kafka日誌數據有很大的延遲,即elk的消費kafka中日誌的速度(200條/s)遠 遠低於maplearning生產日誌的速度(平均3000

原创 Spark history UI歷史監控構建

typora-copy-images-to: …\typora-picture Spark history UI歷史監控構建 created by fangchangtan | 20200609 1 構建歷史spark ui回

原创 docker搭建postgresql9.4主從同步複製集羣

docker搭建postgresql9.4主從同步複製集羣 參考文章: Docker + PostgreSQL 主從環境搭建 ​ https://yq.aliyun.com/articles/641773 p

原创 redis-stat監控

redis-stat監控 一、參考文獻: 聊聊redis的監控工具 https://www.jianshu.com/p/831bf6c8af4f 二、搭建redis-stat 1.監控單個redis實例 docker run --

原创 SonarQube + Maven分析代碼質量

SonarQube + Maven分析代碼質量 1.1. sonarqube簡介 SonarQube是個開源的代碼質量管理平臺,可以通過多種工具和維度對代碼質量進行分析,部分功能還支持可視化,對於代碼缺陷一目瞭然。SonarQub

原创 大數據組件監控體系構建

大數據監控體系構建 基於開源xxx_exporter+promethues+grafana的構建監控系統 1.概況 其中,exporter一般是使用來採集各種組件運行時的指標數據; promethues構建指標時序數據庫; gra

原创 爲什麼synchronized無法禁止指令重排,卻能保證有序性?

轉發:https://www.toutiao.com/i6795075486847336963/ 爲什麼synchronized無法禁止指令重排,卻能保證有序性? 據說這位讀者前面的很多問題會的都還可以,屬於那種可過可不過的類型的

原创 JedisConnectionException Connection Reset

在使用redis的過程常見錯誤總結 1.JedisConnectionException Connection Reset 參考這邊文章: Connection reset原因分析和解決方案 https://blog.csdn

原创 spark監控streamingListener使用與監控告警

Spark-steaming監控設計與驗證方案 ​ created by fangchangtan | 2020/2/24 原創不易,謝絕白嫖,好的話就點

原创 淘寶雙11,億級流量高併發是怎麼抗住的?看完這篇你就明白了

轉載自:https://www.toutiao.com/i6757580992090735117/ 前言雙 11 即將來臨,本文以設計淘寶網的後臺架構爲例,介紹從一百個併發到千萬級併發情況下服務端的架構的演進過程同時列舉出每個演