Apache Flink 在誕生之初就確立了使用同一個引擎支持多種計算形態的目標,包括流計算,批處理和機器學習等等。阿里巴巴在選擇 Flink 作爲新一代大數據引擎時也堅定不移的在貫徹這一目標。在我們的內部版本 Blink 中,我們使用了 SQL 作爲流批一體的統一入口,並且在流計算和批處理上都做了大量的優化。流批一體也開始真正的發揮出了價值,在我們的搜索離線數據處理和機器學習平臺上均獲得了較好的效果。本演講將分享 Blink 針對流批一體化的場景做了哪些優化,在支持實際業務上碰到了哪些問題,我們又是怎麼解決的。
聽衆受益
-
瞭解 Flink SQL 的技術棧和未來的方向;
-
流批一體化如何在業務中產生實際價值;
-
流批一體化面臨的業務挑戰和我們是如何解決的。