原创 生態 | Apache Hudi集成Apache Zeppelin(轉載)

https://mp.weixin.qq.com/s/_mNwL5uXSDYyqtLDPx0iDA

原创 Flink集成Apollo獲取配置V2

上一篇介紹了使用基礎Java客戶端接入Apollo的示例,有同學反映在分佈式環境下獲取不到Apollo配置,只能在main方法中初始化使用,姿勢不夠優雅。這裏將Apollo的Java客戶端將Flink官方推薦的ParameterTool結合

原创 使用Apache Avro序列化、反序列化數據

本文通過兩個示例介紹如何使用avro序列化,反序列數據(Avro的簡介請參閱:https://blog.csdn.net/Mathieu66/article/details/105601509)。我們知道使用Avro序列化、反序列化數據時需

原创 HBase建表報錯:ERROR: org.apache.hadoop.hbase.PleaseHoldException: Master is initializing

轉載自:https://blog.csdn.net/RONE321/article/details/99940862?depth_1-utm_source=distribute.pc_relevant.none-task-blog-Blog

原创 Mac安裝MySQL(轉載)

https://www.cnblogs.com/nickchen121/p/11145123.html

原创 Docker常用命令

目錄一、幫助命令1. 查看docker版本2. 查看docker信息3. 查看docker幫助命令二、鏡像命令1. 列出本地主機上的鏡像2. 查詢鏡像3. 下載鏡像4. 刪除鏡像三、 容器命令1. 新建並啓動容器2. 列出所有正在運行的容器

原创 布隆過濾器(Bloom Filter)

目錄1. 什麼是布隆過濾器2. 基本原理3. 誤判率及相關計算4. 改進:計數 Bloom Fliter1. 什麼是布隆過濾器布隆過濾器(Bloom Filter後文簡稱BF)是由Howard Bloom 在1970年提出的二進制向量數據結

原创 虛擬機類加載機制

目錄1. 什麼是類加載機制?2. 什麼時候進行類加載?3. 類加載時都幹了啥?3.1 加載3.2 驗證3.3 準備3.4 解析3.5 初始化4. 什麼是類加載器?4.1 類與類加載器的關係4.2 雙親委派模型1. 什麼是類加載機制?所謂類加

原创 versions-maven-plugin插件批量修改版本號

轉自:https://www.jianshu.com/p/88da01804d3c## 更改(有backup文件) mvn versions:set -DnewVersion=1.2.0-SNAPSHOT ## 回滾 (沒有backup文

原创 Flink on Yarn 日誌滾動實現

Flink on Yarn 模式下,業務應用內部配置的 logback.xml/log4j.properties 是無法加載的,Flink 會默認採用安裝目錄下的 $FLINK_HOME/logback.xml/log4j.properti

原创 DataLake(轉載)

DataLake5 February 2015Martin FowlerData Lake is a term that's appeared in this decade to describe an important componen

原创 Java8 DateUtils

package com.xianhgu.ts.date; import com.xiaghu.ts.string.StringUtils; import org.slf4j.Logger; import org.slf4j.LoggerF

原创 Flink 停機恢復(savepoint)入門示例

目標:使用flink從socket接收字符串,根據空格分割成單詞,統計單詞出現的次數。使用savepoint取消任務,恢復,使計算從上一次停止的地方繼續。主程序:package com.ccclubs.state; import com.

原创 Akka and Actors

目錄Akka and ActorsAkka and the Actor ModelActor SystemsActors in FlinkJobManager & TaskManagerJobClientAsynchronous vs. S

原创 Juggling with Bits and Bytes(轉載)

目錄Juggling with Bits and BytesHow Apache Flink operates on binary dataData Objects? Let’s put them on the heap!What is F