定時任務框架選型及項目實際使用

 

一、項目目前定時任務現狀

  1. 使用Linux系統的crontab直接調用Java服務
  2. 優缺點:
  • 優點:部署簡單,由linux系統維護相對Java進程維護更加維定
  • 缺點:單機部署,風險大;出問題後排錯難度大;需要運維介入成本大
  • 總結:針對目前項目情況,弊大於利

二、Java主流三大定時任務框架優缺點

選型時原則:

少服務器 後期維護方便 增加任務省事 而且快捷 不涉及啓停服務

Quartz

  1. 優點:支持集羣部署
  2. 缺點:沒有自帶的管理界面;調度邏輯和執行任務耦合在一起;維護需要重啓服務
  3. 總結:針對目前項目情況,利弊相同

 

xxl-job

  1. 優點:支持集羣部署;提供運維界面維護成本小;自帶錯誤預警;相對elastic-job來說不需要額外的組件(zookeeper);支持調度策略;支持分片; 故障轉移 ;更適合分佈式
  2. 缺點:相對Quartz來說需要多部署調度中心
  3. 總結:針對目前項目情況,利大於弊

elastic-job

  1. 優點:支持集羣部署;維護成本小
  2. 缺點:elastic-job需要zookeeper,zookeeper集羣高可用至少需要三臺服務器
  3. 總結:針對目前項目情況,弊大於利

小結:

綜合選型原則及三個定時任務框架的優缺點和目前項目的狀況,建議選用xxl-job

三、xxl-job一些特性

  1. xxl-job參考資料: http://www.cnblogs.com/xuxueli/p/5021979.html


     2、一些實用特性:       

           (1)執行失敗可以查看日誌

           (2)支持郵件報警

              (3)路由策略支持輪詢等策略,可以減輕執行服務器的壓力

                   (4)輪詢時間等參數修改後立即生效

                    (5)執行器有問題或新增,快速識別

                  (6)調度中心高可用,調度中心可以集羣部署(集羣部署的機器時鐘必須同步),如果調度中心沒有做負載在執行器的配置中需要配多個地址,如果調度中心配置負載則執行器配置負載地址即可

                    (7)執行器高可用(執行器可以集羣部署)

                  

四、針對項目目前定時任務的選用策略建議

  1. 目前項目的所有定時任務(和運維亞光確認)共8個
  2. 不同定時任務策略的建議:

        (1)結算相關

              a.罰息定時任務(wf-job-practical)

                       路由策略:輪詢

                       阻塞處理:單機串行

                       失敗處理:失敗告警

               b.結清定時任務(wf-job-settlement)

                     路由策略:輪詢

                     阻塞處理:單機串行

                     失敗處理:失敗告警

            (2)  短信相關

                 a. 短信發送定時任務(wf-sms-send-job)

                           路由策略:輪詢

                          阻塞處理:丟棄後續調度

                           失敗處理:失敗告警

                 b.短信業務定時任務(wf-sms-write-job)

                            路由策略:輪詢

                            阻塞處理:單機串行

                            失敗處理:失敗告警

                c.短信數據清理定時任務(wf-sms-cleardata-job)

                            路由策略:輪詢

                            阻塞處理:單機串行

                            失敗處理:失敗告警

            (3).報表相關

                  a.風控定時任務wf-bi-risk-job

                       路由策略:輪詢

                       阻塞處理:單機串行

                       失敗處理:失敗告警

                 b. wf-bi-market-job

                       路由策略:輪詢

                      阻塞處理:單機串行

                      失敗處理:失敗告警

                c.wf-bi-job

                       路由策略:輪詢

                       阻塞處理:單機串行

                        失敗處理:失敗告警

五、項目中加入xxl-job結合

  1. 說明:以下Demo以短信發送服務定時任務(wf-sms-send-job)爲例
  2. 建議:執行器根據不同的模塊建立工程(既方便統一部署又方便升級維護),比如:結算的定時任務可以組成一個工程;短信定時任務可以組成一個工程等
  3. 項目中增加xxl-job

(1)在pom中增加依賴

    (2)application.properties增加相關配置

      (3)增加config解析類

       (4)增加執行器

發佈了151 篇原創文章 · 獲贊 39 · 訪問量 7萬+
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章