這裏我會總結一下，Springboot 集成 spring-kafka中，consumer 的相關配置，Api
待總結
現象 kafka-admin-client-thread線程打印: AdminMetadataManager.updateField Metadata update failed: org.apache.kafka.common.error
轉載自天地風雷水火山澤 目的 因爲我們的數倉數據源是Kafka，離線數倉需要用Flume採集Kafka中的數據到HDFS中。 在實際項目中，我們不可能一直在Xshell中啓動Flume任務，一是因爲項目的Flume任務很多，二是一旦Xsh
最近在讀《微服務架構設計模式》，開始的時候我非常的好奇，因爲在我印象中，設計模式是常說的那23種設計模式，而微服務的設計模式又是什麼呢？這個問題也留給大家，在文末我會附上我對這個問題的理解。本次文章的內容主要是工作中對微服務設計模式的應
本文分享自華爲雲社區《GaussDB(DWS)基於Flink的實時數倉構建》，作者：胡辣湯。 大數據時代，廠商對實時數據分析的訴求越來越強烈，數據分析時效從T+1時效趨向於T+0時效，爲了給客戶提供極速分析查詢能力，華爲雲數倉GaussDB
在實際項目中，從Kafka到HDFS的數據是每天自動生成一個文件，按日期區分。而且Kafka在不斷生產數據，因此看看kettle是不是需要時刻運行？能不能按照每日自動生成數據文件？ 爲了測試實際項目中的海豚定時調度從Kafka到HDFS的K
作者：荊磊 背景 ELK (Elasticsearch、Logstash、Kibana) 是當下開源領域主流的日誌解決方案，在可觀測場景下有比較廣泛的應用。 隨着數字化進程加速，機器數據日誌增加，自建 ELK 在面臨大規模數據、查詢性能等方
Group coordinator 10.0.17.89:9094 (id: 2147483646 rack: null) is unavailable or invalid, will attempt rediscovery 原因：當前消
本文介紹了一家第三方支付企業在面對市場競爭和監管壓力的態勢下，通過升級核心數據庫來提升業務能力的實踐。該企業選擇 TiDB 分佈式數據庫，成功將其應用於核心業務、計費、清結算和交易查詢等關鍵系統。TiDB 的水平擴展能力、高可用性和簡化數據
（本文整理自民生銀行王斐在2023Zabbix中國峯會上的演講，點擊圖片查看視頻，更多內容可在B站“Zabbix中國”查看） 大家好，我是來自民生銀行的王斐，給大家分享民生銀行在Zabbix相關管理上的應用成果，還有Zabb
隨着雲計算和大數據的快速發展，雲原生消息隊列作爲分佈式系統架構中的關鍵組件，正以前所未有的速度向前發展。3 月 29 日 10:00，阿里雲飛天發佈時刻，阿里雲消息隊列服務將宣佈向 ApsaraMQ 進行全面升級，實現全系產品 Server
雲原生時代，消息隊列成爲現代化應用的關鍵組件，也是雲原生架構底層通信的基礎設施。阿里雲消息隊列發展至今已有十多年曆程。 3 月 29 日，在阿里雲最新一期的“飛天發佈時刻”上，阿里云云原生應用平臺負責人丁宇宣佈，雲消息隊列產品升級全新品牌
方案概述 MSE 網關可以爲後端服務提供轉發路由能力，在此基礎上，一些敏感的後端服務需要特定認證授權的用戶才能夠訪問。MSE 雲原生網關致力於提供給雲上用戶體系化的安全解決方案，其中 JWT 認證能力是在 Json Web Token 這種
方案概述 現在絕大多數客戶都有很多非結構化的數據存在 OSS 中，以圖片，視頻，音頻居多。舉一個圖片處理的場景，現在各種終端種類繁多，不同的終端對圖片的格式、分辨率要求也不同，所以一張圖片往往會有很多張衍生圖，那如果所有的衍生圖都存在 OS
hive 1：hive是怎麼產生的？ 2：hive的框架是怎麼樣的？ 3：hive 執行流程是什麼？ 4：hive sql是如何把sql語句一步一步到最後執行的？ 5：hive sql任務常用參數調優做過什麼？ spark 6：sp
開源項目推薦 Retina Retina 是一個與雲無關的開源 Kubernetes 網絡可觀測平臺，它提供了一個用於監控應用程序運行狀況、網絡運行狀況和安全性的集中中心。它爲集羣網絡管理員、集羣安全管理員和 DevOps 工程師提供可操作
