大數據實戰:阿里巴巴開源的 Blink 實時計算框架真香

 

Blink 開源了有一段時間了,竟然沒發現有人寫相關的博客,其實我已經在我的知識星球裏開始寫了,今天來看看 Blink 爲什麼香?

我們先看看 Blink 黑色版本:

image

對比下 Flink 版本你就知道黑色版本多好看了。

image

你上傳 jar 包的時候是這樣的:

【大數據開發學習資料領取方式】:加入大數據技術學習交流羣458345782,點擊加入羣聊,私信管理員即可免費領取

我們來看看 Blink 運行的 job 長啥樣?

image

再來對比一下 Flink 的樣子:

image

查看 Job Task 的詳情,可以看到開始時間、接收記錄、並行度、duration、Queue in/out、TPS

image

查看 subTask,這裏可以直接點擊這個日誌就可以查看 task 日誌:

image

查看背壓:

image

查看 task metric,可以手動添加,支持的有很多,這點很重要,可以根據每個算子的監控以及時對每個算子進行調優:

image

查看 job 運行時間段的情況:

image

查看 running 的 job:

image

查看已經完成的 job:

image

查看 Task Manager:

image

Task Manager 分配的資源詳情:

image

Task Manager metric 監控信息詳情:

image

Task Manager log 文件詳情,包含運行產生的日誌和 GC 日誌:

image

Task Manager 日誌詳情,支持高亮和分頁,特別友好,媽媽再也不擔心我看不見 "刷刷刷" 的日誌了。

image

總結

介紹了 Flink 的 Blink 分支編譯後運行的界面情況,總體來說很棒,期待後面 Blink 合併到 Flink!



作者:zhisheng_blog
鏈接:https://www.jianshu.com/p/9e8908cfd359
來源:簡書
簡書著作權歸作者所有,任何形式的轉載都請聯繫作者獲得授權並註明出處。

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章