原创 說個跳槽不成功的普遍原因

最近後臺有很多粉絲反應——擁有三年工作經驗的大數據開發,現在面試成功率非常低!脈脈上也在反應找不到工作????面試過程中,面試官首先會問一些底層原理問題,如HBase是如何存數據的、爲什麼讀得快、Zookeeper數據怎麼保證一致性等等

原创 幹掉 RESTful:graphql真香!

Flink 從入門到精通 系列文章背景REST作爲一種現代網絡應用非常流行的軟件架構風格,自從Roy Fielding博士在2000年他的博士論文中提出來到現在已經有了20年的歷史。它的簡單易用性,可擴展性,伸縮性受到廣大Web開發者的

原创 OAuth 2.0 授權機制,一點兒都不簡單!

在初次使用一個 App 時,我們大多都會授權第三方賬號登錄,比如微信。這樣,App 會直接拿到微信授權的信息,省去了用戶二次上傳頭像、輸入用戶名等一系列繁複的註冊流程。而這整個授權過程都可以歸到一個詞上,就是 OAuth 2.0。 作爲

原创 5 年開發搞不定 MySQL !

MySQL 作爲互聯網中非常熱門的數據庫,在高併發業務場景下,一條好的 MySQL 語句能爲企業節省大量的運作時間和成本,這也是爲何互聯網大廠面試官最愛考察數據庫底層和性能調優的原因。因此,瞭解其底層原理和架構的設計非常重要,尤其是My

原创 Flink 能否動態更改 Checkpoint 配置?

前段時間在社區郵件中看到有人提問是否可以動態開啓 Checkpoint,昨天在釘釘羣中又看到有個同學在問能夠動態調整 Checkpoint 的時間,其實不僅僅是這些,在社區郵件和羣裏經常看到有問這塊內容的問題,所以可以發現在 Flink

原创 Flink 清理過期 Checkpoint 目錄的正確姿勢

本博客是筆者在生產環境使用 Flink 遇到的 Checkpoint 相關故障後,整理輸出,價值較高的 實戰採坑記,本文會帶你更深入的瞭解 Flink 實現增量 Checkpoint 的細節。通過本文,你能 get 到以下知識:Flin

原创 Flink 使用大狀態時的一點優化

通過本文你能 get 到以下點:Flink 內使用大狀態時,該如何配置。常見的負載均衡策略Flink 源碼中在選擇 RocksDB 狀態磁盤時,存在的問題。給出一些解決方案,並分析了每種方案利弊一、爲什麼要優化?(優化背景)Flink

原创 Flink 維表關聯多種方案對比

上篇博客提到 Flink SQL 如何 Join 兩個數據流,有讀者反饋說如果不打算用 SQL 或者想自己實現底層操作,那麼如何基於 DataStream API 來關聯維表呢?實際上由於 Flink DataStream API 的靈

原创 Flink 1.11 Release 文檔解讀

點擊上方“zhisheng”,選擇“設爲星標”後臺回覆"666",獲取新資料集羣和部署支持 Hadoop 3.0 及更高的版本:Flink 不再提供任何 flink-shaded-hadoop- 依賴。用戶可以通過配置 HADOOP_C

原创 Flink 使用 connect 實現雙流匹配

閱讀本文需要提前瞭解 connect 和 ProcessFunction 相關的知識。如果不瞭解的同學可以先通過官網或其他資料熟悉一下。一、案例分析在生產環境中,我們經常會遇到雙流匹配的案例,例如:一個訂單包含了訂單主體信息和商品的信息

原创 Flink 流計算編程--看看別人怎麼用 Session Window

點擊上方“zhisheng”,選擇“設爲星標”回覆“666”,獲取精選資料1、簡介流處理在實際生產中體現的價值越來越大,Apache Flink這個純流式計算框架也正在被越來越多的公司所關注並嘗試使用其流上的功能。在2017年波蘭華沙大

原创 從 0 到 1 搭建一套 Flink 的監控系統

點擊上方“zhisheng”,選擇“設爲星標”後臺回覆"666",獲取新資料之前講解了 JobManager、TaskManager 和 Flink Job 的監控,以及需要關注的監控指標有哪些。本文帶大家講解一下如何搭建一套完整的 F

原创 Apache ShardingSphere 發起人張亮:這個我覺得行

*文中有1元福利,文末有第二重大福利 互聯網帶來的海量信息化數據,如何高效存儲和訪問數據,這一件事情足以讓工程師頭禿。 當數據量達到千萬甚至上億時,單臺數據庫的存儲能力會成爲整個系統的瓶頸,聰明的工程師們想盡辦法處理數據,通過的業務的垂

原创 五年磨一劍:滴滴順風車服務端之穩定性規範

點擊上方“zhisheng”,選擇“設爲星標”後臺回覆"666",獲取新資料桔妹導讀:本文給出其中穩定性相關的規範,這些規範都是順風車成立五年來,對大量真實線上故障覆盤、總結得到的,希望對大家服務的穩定性提升有所幫助。本文轉自:滴滴技術

原创 ClickHouse 入門

點擊上方“zhisheng”,選擇“設爲星標”後臺回覆"666",獲取新資料本文作者:「LittleMagics」 原文鏈接:https://blog.csdn.net/nazeniwaresakini/article/details/