一、WeDataSphere介紹
WeDataSphere(以下簡稱WDS)是一套一站式、金融級、全連通、開源開放的大數據平臺套件。目前WDS生態共開源了9個項目,分別爲:
(1)Apache Linkis(incubating) 計算中間件,已入選Apache基金會作爲頂級項目進行孵化;
(2)DataSphereStudio 一站式數據應用開發管理門戶
(3)Qualitis 數據質量管理平臺
(4)Schedulis 工作流任務調度系統
(5)Exchangis 數據交換平臺
(6)Prophecis 一站式機器學習平臺
(7)Scriptis 交互式數據分析 Web 工具
(8)Visualis 數據可視化工具
(9)Streamis 流式應用開發管理系統
WDS項目的沙箱環境試用企業超過1800家,自行搭建試用的企業超過800家,涉及到金融、互聯網、通信、製造、教育等衆多行業。
WDS社區在高速發展中,運營着10個微信社羣和1個QQ羣,覆蓋了6000+的開發者,爲社區貢獻的Contributor超過150人。
二、招聘崗位
隨着WDS生態的發展,有些正在使用WDS的企業專門開設了特定的崗位,要招聘WDS的人才。
本期帶來的崗位來自於央企集團科技公司、銀行和電信,具體請看詳情。
公司名稱:中國電信
招聘崗位:大數據工程師、技術專家等多個崗位
簡介:
1、天翼雲大數據平臺團隊,崗位base上海
2、歡迎各路jvm高手、linux高手加盟,你懂JAVA,我懂大數據,我們一起做好大數據性能優化
3、只要你很懂Linux,jvm,善於鑽研,解決問題,我們會培養你成爲大數據技術專家。
4、也歡迎綜合能力強的人加盟,比如你很懂前端,無論你以後想做深入的前端技術,還是想做全棧,或者後面轉產品經理,都有無限可能。希望各位大神過來帶我們飛吧,一起研發建設大數據。
【工作職責】
1、負責大數據基礎平臺的組件研發與性能優化;
2、負責大數據PaaS平臺、資源調度等容器相關服務的平臺研發及應用研發;
3、參與大數據平臺相關產品化研發,包括運維自動化、日誌管理、監控告警、安全管理、數據集成、作業提交、作業調度等;
4、 基於Apache Linkis聯合共建,參與研發作業統一提交中間件,包括不僅限於,SQL路由,安全審計,跨集羣查詢等;
【任職要求】
1、幹活積極主動,誠實守信;
2、有紮實的Java語言基礎,熟悉Linux系統,能夠熟練使用shell/python/ansible腳本處理工具,具備成熟的調優經驗;
3、對大數據相關組件如HDFS、YARN、Linkis、Ambari 、Spark、Hbase、Flink、Hive,Kafka等2至3種組件的架構與底層實現有一定理解;有開源社區參與經驗、Kubernetes集羣運維經驗及相關的源碼開發經驗優先;
招聘聯繫人王先生,微信 AdamLinkis,請直接聯繫投遞簡歷。
公司名稱:微衆銀行
招聘崗位1:大數據平臺工程師
簡介:國內首家民營銀行、主導WeDataSphere開源項目、發展空間好
【工作職責】
1. 功能工具方向:主要負責大數據平臺套件WeDataSphere 功能工具和中間件系統開發,如計算中間件Linkis,數據應用開發管理門戶DataSphereStudio 等;
2. 基礎引擎方向:負責Hadoop/Spark/Flink 等計算存儲引擎中一個/多個的二次開發和運維自動化開發;
3. 保障所負責組件穩定、高效運行,高效調優排障;
4. 崗位工作地點在武漢;
【技能要求】
1. 熟悉java,熟悉Spring和Spring boot;熟悉shell/python/perl 或其他腳本語言中的任意一門;
2. 熟悉WeDataSphere 開源組件優先;
3. 工作經驗3年以內;
招聘崗位2:技術產品經理(大數據平臺方向)
【工作職責】
1. 負責微衆銀行大數據平臺套件WeDataSphere 相關,競品調研、需求分析、產品功能與交互設計、產品資料庫整理維護、開源運營、外部合作交流工作;
2. 崗位工作地點在深圳;
【技能要求】
1. 有數據分析項目經驗,熟悉SQL語言及數倉ETL過程;
有數據產品、數據治理、數據中臺等項目經驗優先;熟悉後臺開發語言者優先;
2. 有需求分析和產品規劃經驗,熟悉交互設計;
有過to B 產品交互設計經驗優先;
3. 有大數據平臺相關產品或項目經驗優先;瞭解Hadoop, Spark 等常見大數據生態底層引擎者優先;
4. 有開源運營、售前BD 經驗優先;英語交流流利者優先;
5. 熟悉WeDataSphere 開源項目者優先;
招聘聯繫人邸帥先生,微信 sargentti,請直接聯繫投遞簡歷。
公司名稱:龍騰數科技術有限公司
招聘崗位:大數據平臺架構師
簡介:央企集團科技公司,base成都,薪資open
【崗位職責】
1、基於DataSphere Studio、Linkis組件設計與優化大數據平臺、數據中臺的技術架構,根據不同需求進行技術打包;
2、能夠獨立進行行業大數據應用的整體技術框架、業務框架和系統架構設計和調優等工作,根據系統的業務需求,能夠指導開發團隊完成實施工作;
3、負責數據基礎架構和數據處理體系的升級和優化,不斷提升系統的穩定性和效率,爲相關的業務提供大數據底層平臺的支持和保證;
4、負責大數據平臺相關服務器日常運維與監控;
5、負責技術類文獻的編寫;
6、負責大數據平臺技術框架的選型與技術難點攻關;
7、研究與跟蹤大數據新技術發展方向,制定大數據平臺技術發展戰略規劃;
8、基於大數據技術與應用行業特點,深入探索應用結合模式;
【任職要求】
1、本科及以上學歷、計算機相關專業,5-10工作經驗。精通Java/Scala/Python語言中的一種或多種;
2、至少3年以上實際大數據項目架構經驗,有完整的大數據平臺經驗,能快速定位並解決架構中諸如性能、安全、架構合理性等問題;
3、精通Hadoop技術架構,並深入理解Hadoop生態圈各種大數據組件的應用以及架構模式(Flume、Kafka、Hadoop、Spark、Hive、Flink等);
4、具備優秀的團隊意識和溝通能力,有較強的學習能力和鑽研精神;
5、熟悉docker,k8s等自動部署框架;
6、熟悉DataSphere Studio、Linkis組件源碼並能對進行二次開發者優先;
7、參與或主導過數據中臺項目、有實際數據治理經驗優先;
招聘聯繫人趙先生,微信 a15882488308,請直接聯繫投遞簡歷。
如有要發佈招聘信息,請微信聯繫小助手
— END —
● 往期精選 ●
本文分享自微信公衆號 - WeDataSphere(gh_273e85fce73b)。
如有侵權,請聯繫 [email protected] 刪除。
本文參與“OSC源創計劃”,歡迎正在閱讀的你也加入,一起分享。