原创 flink實戰-模擬簡易雙11實時統計大屏

文章目錄背景實例講解構造數據構造統計結果類定義窗口和觸發器集合計算收集窗口結果數據使用聚合窗口的結果結果統計示例運行結果 背景 在大數據的實時處理中,實時的大屏展示已經成了一個很重要的展示項,比如最有名的雙十一大屏實時銷售總價展示

原创 三階段提交

三階段提交(英語:Three-phase commit),也叫三階段提交協議(英語:Three-phase commit protocol),是在計算機網絡及數據庫的範疇下,使得一個分佈式系統內的所有節點能夠執行事務的提交的一種分佈式算法

原创 大數據技術實戰系列文章目錄

前言 一般程序員在開發一個東西的時候,很多人(包括我😀)都會習慣性的先去網上搜索一下類似的demo,然後拿來改一改(如果有能正常跑的代碼還是我要的那就更好了😃)。這個大數據技術實戰系列把我在工作和學習中遇到的一些例子整理一下,並提

原创 基於akka的flink RPC調用

    flink中的rpc框架使用的akka。在本節並不詳細講述akka,而是就flink中rpc來講述akka的部分內容。本節,我從AkkaRpcActor.handleRpcInvocation方法講起。   看過hadoop、ya

原创 flink實戰-使用廣播實現報警閾值動態更新

文章目錄背景flink broadstate簡介使用方法實例講解簡述一下需求自定義source 背景 緊接着上一篇文章【FLINK實戰-使用CEP進行網站監控報警和報警恢復】,上一篇主要講了怎麼對數據流做監控報警,但是實際生產環境