how to research
- spark自動引包
- spark不自動引包
- spark怎樣自動引包
- how auto import
idea只會自動加載類的引用,spark中的算子,如when,col等函數時,並不會自動import pageckage路徑,可能和隱式轉換有關係吧。
這時需要用以下方式:
在函數前加上functions
。
例如:
functions.when
idea就會自動加載引用:import org.apache.spark.sql.functions.when
how to research
idea只會自動加載類的引用,spark中的算子,如when,col等函數時,並不會自動import pageckage路徑,可能和隱式轉換有關係吧。
這時需要用以下方式:
在函數前加上functions
。
例如:
functions.when
idea就會自動加載引用:import org.apache.spark.sql.functions.when