原创 Intellij IDEA 自動生成serialVersionUID序列化版本號設置

不同於eclipse,在IDEA中serialVersionUID是默認不自動生成的,需要通過我們幾步設置達到自動生成序列話版本號的目的。 首先打開IDEA的setting。 在Editor下找到Inspections,也可快捷搜索i

原创 YARN之Container-什麼是Container?

在最基本的層面上,Container是單個節點上如RAM、CPU核核磁盤等物理資源的集合。單個節點上(或者單個大節點)可以有多個Container。系統中的每個節點可以認爲是由內存(如512MB或者1GB)和CPU的最小容量的多個Co

原创 YARN調度組件-FIFO、Capacity、Fair調度器

YARN調度組件 YARN有一個可拔插的調度器組件,根據不同的使用場景和用戶需求,管理員可以選擇簡單的FIFO(先入先出),Capacity或者Fair Share Scheduler。Scheduler類在yarn-dafault.

原创 Yarn初始化異常:Not able to initialize user directories.exitCode:-1000

最近碰到這麼一個異常: Application application_1528180019666_0366 failed 2 times due to AM Container for appattempt_152818001966