原创 Kafka GUI工具

1.OffsetExplorer3 個人免費,不支持中文 官網地址:https://kafkatool.com/download.html 界面: 2.Kafka IDE 部分版本免費,不支持中文, 官網地址:https://kafkai

原创 Docker安裝Kafka

官方文檔地址:https://kafka.apache.org/documentation/#docker 鏡像地址:https://hub.docker.com/r/apache/kafka 官方案例及說明地址:https://githu

原创 CSS3一些總結

1.標準流 2.浮動 浮動的元素將脫離標準流 浮動後的元素不會佔有原有的位置 浮動有 左浮動 | 右浮動 | 不浮動 浮動的元素不會浮出當前元素的父元素之外,即浮動元素的外邊緣不會超出其父元素的內邊緣。 浮動元素之間不會重疊。 沒有上下浮

原创 Kafka 集成SpringBoot

1.環境準備 1.Kafka集羣環境準備 1.準備一個Kafka集羣環境並啓動 Kafka 3.6.1 集羣安裝與部署 2.創建first Topic /usr/kafka/kafka_2.13-3.6.1/bin/kafka-topics

原创 Kafka 集成Spark

1.環境準備 1.Kafka集羣環境準備 1.準備一個Kafka集羣環境並啓動 Kafka 3.6.1 集羣安裝與部署 2.創建first Topic /usr/kafka/kafka_2.13-3.6.1/bin/kafka-topics

原创 Kafka 集成Flink

1.環境準備 1.Kafka集羣環境準備 1.準備一個Kafka集羣環境並啓動 Kafka 3.6.1 集羣安裝與部署 2.創建first Topic /usr/kafka/kafka_2.13-3.6.1/bin/kafka-topics

原创 Flume 1.11 部署

Flume官網: https://flume.apache.org/ 下載地址: https://archive.apache.org/dist/flume/ 文檔地址: https://flume.apache.org/FlumeUser

原创 Kafka 集成Flume

1.環境準備 1.準備一個Kafka集羣環境並啓動 Kafka 3.6.1 集羣安裝與部署 2.在任意Kafka集羣節點上安裝Flume Flume 1.11 部署 2.Flume 生產者 1.配置 Flume cd /usr/flume/

原创 Kafka監控系統Kafka Eagle

kafka集羣部署完成後需要有一個可視化web頁面,便於實時查看和觀測kafka集羣狀態,kafka本身並沒有提供可視化頁面,但市面上有很多開源的可視化工具,我們以其中的Kafka Eagle爲例,在安裝Kafka Eagle之前,至少需要

原创 Kafka 3.6.1 Kraft模式 集羣安裝與部署

1.集羣規劃 hadoop02(192.168.58.130) hadoop03(192.168.58.131) hadoop04(192.168.58.132) kafka kafka kafka 2.集羣部署 1.下

原创 Kafka Broker(節點)

測試內容。

原创 Kafka 生產者

1.生產者消息發送流程 1.發送原理 在消息發送的過程中,涉及到了兩個線程——main 線程和 Sender 線程。在 main 線程中創建了一個雙端隊列 RecordAccumulator。main 線程將消息發送給 RecordAccu

原创 Kafka 3.6.1 集羣安裝與部署

1.集羣規劃 hadoop02(192.168.58.130) hadoop03(192.168.58.131) hadoop04(192.168.58.132) zookeeper zookeeper zookeeper

原创 FlinkSQL 總結

1. sql-client 準備 1.準備Flink集羣 以yarn-session模式爲例 參考地址:Flink1.18 & YARN 會話模式 2.啓動 Flink 的 sql-client /usr/flink/flink-1.18.

原创 Flink 中的容錯機制

在 Flink 中,有一套完整的容錯機制來保證故障後的恢復,其中最重要的就是檢查點。 1.檢查點(Checkpoint) 在流處理中,我們可以用存檔讀檔的思路,就是將之前某個時間點所有的狀態保存下來,這份“存檔”就是所謂的“檢查點”(che