Flink源碼學習

原創 liuhehe123 2020-06-21 18:22

Flink 從0到1學習 —— Flink 中如何管理配置？

flink 中文社區 ； https://ververica.cn/developers/flink-training-course3/

Flink博客專欄

HDFS -

Flink-阿里雲棲社區

發表評論
所有評論
還沒有人評論，想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章

Flink 三種狀態存儲方式 MemoryStateBackend、FsStateBackend、RocksDBStateBackend

StateBackend的意思是狀態後端。 狀態後端定義了流式應用程序狀態如何存儲和checkpoint的。不同的狀態後端以不同的方式來存儲其狀態，並且使用不同的數據結構來保存正在運行的應用程序的狀態。   MemoryStateBack

二十六画生的博客 2020-07-07 23:55:04

Flink DataSet partitionByRange sortPartition 用法 實例

package DataSetPartitionTest1; import org.apache.flink.api.common.functions.MapFunction; import org.apache.flink.api.

二十六画生的博客 2020-07-07 23:55:04

Flink ClassNotFoundException BatchTableEnvironmentImpl 報錯 解決方法

Exception in thread "main" org.apache.flink.table.api.TableException: Create BatchTableEnvironment failed.     at org.a

二十六画生的博客 2020-07-07 23:55:04

Flink 分佈式緩存 廣播變量 區別

區別: 1.廣播變量是基於內存的,是將變量分發到各個worker節點的內存上（避免多次複製，節省內存） 2.分佈式緩存是基於磁盤的,將文件copy到各個節點上,當函數運行時可以在本地文件系統檢索該文件（避免多次複製，提高執行效率）   分

二十六画生的博客 2020-07-07 23:55:04

Flink 廣播變量 實例

版本： flink1.9.2,java1.8 廣播變量用於DataSet： package BroadCast; import org.apache.flink.api.common.functions.RichMapFunction

二十六画生的博客 2020-07-07 23:55:04

Flink 分佈式緩存 實例

版本： flink1.9.2,java1.8 package DistributedCache; import org.apache.commons.io.FileUtils; import org.apache.flink.api.

二十六画生的博客 2020-07-07 23:55:04

Flink 數據類型 & TypeInformation信息

原生數據類型 Java Tuples類型 Scala Case Class類型 POJOs 類型 Flink Value類型 特殊數據類型 Scala API類型信息 Java API類型信息 自定義TypeInformation Fli

程序猿进阶 2020-07-08 06:02:55

Flink的WaterMark詳解

WaterMark是什麼？ 在瞭解Flink的WaterMark之前先要了解Flink的時間語義。在Flink裏面有三種時間語義： ①Even Time：事件創建的時間，時間在數據裏面。 ②Ingestion Time：數據進

情深不仅李义山 2020-07-08 01:13:18

flink sql實例， TableException: Create BatchTableEnvironment failed.報錯

package SQL; import org.apache.flink.api.java.DataSet; import org.apache.flink.api.java.ExecutionEnvironment; import

二十六画生的博客 2020-07-07 23:55:04

Flink Keyed State ，Operator State 作用 區別 用法

Flink的State類型 基本類型劃分： 在Flink中，按照基本類型，對State做了以下兩類的劃分： Keyed State，和Key有關的狀態類型，它只能被基於KeyedStream之上的操作，方法所使用。我們可以從邏輯上理解這

二十六画生的博客 2020-07-07 23:55:04

Java近期新聞綜述：MicroProfile 4.1、Spring Boot更新、Kotlin、Scala、OpenJDK、Liberica JDK

{"type":"doc","content":[{"type":"paragraph","attrs":{"indent":0,"number":0,"align":null,"origin":null},"content":[{"typ

Michael Redlich 2021-08-13 11:29:03

InfoQ 編程語言 2 月排行榜，更好的投票活動來了

{"type":"doc","content":[{"type":"paragraph","attrs":{"indent":0,"number":0,"align":null,"origin":null},"content":[{"typ

InfoQ 中文站 2021-03-22 18:34:58

Spark(Persist)

RDD的持久化 可以使用persist(StorageLevel)或者cache()方法，數據會在第一次計算後緩存在各節點的內存裏 Spark的緩存具有容錯機制，如果RDD中的任何一個緩存分區丟失，Spark會按照原來的計算過程自動地重新

原創 2021-01-30 10:04:50

Scala基礎-語法特性(一)：類型和變量

{"type":"doc","content":[{"type":"heading","attrs":{"align":null,"level":2},"content":[{"type":"text","text":"統一類型"}]},{

大规模数据处理学习者 2020-11-14 16:44:00

Java的新未來：逐漸“Kotlin化”

來自不同編程語言的競爭正促使Java不斷吸收新特性，變得更能適應時代和開發人員的新需求。 本文最初發表於 The Bored Dev網站，經原作者授權由InfoQ中文站翻譯並分享。我們行業始終有一個熱門話題，那就是對Java的批判，這種批

The Bored Dev 2020-08-17 08:03:49