import org.apache.spark.sql.functions._
def compare(value_missing: String, value: String): Boolean = {
var flag = false
if (value_missing.length == value.length) {
flag = value_missing.zip(value).forall {
case ('*', c2) => true
case (c1, '*') => true
case (c1, c2) => c1 == c2
}
}
flag
}
val udf_compare = udf(compare(_: String, _: String): Boolean)
df.withColumn("flag", udf_compare($"mobile_missing", $"mobile"))
spark sql 自定義udf函數
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.