spark修改日誌級別

通過SparkSession進行設置

val spark = SparkSession
      .builder()
      .appName("AWSMMonitorInfo")
      .enableHiveSupport()
      .config("hive.exec.dynamic.partition", true) // 支持 Hive 動態分區
      .config("hive.exec.dynamic.partition.mode", "nonstrict") // 非嚴格模式
      .getOrCreate()

//設置打印warn及以上級別的日誌
spark.sparkContext.setLogLevel("WARN")
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章