原创 我的友情鏈接

51CTO博客開發

原创 spark-shell導入第三方依賴

對於spark下已經有的依賴,直接 import SparkContext但是有些第三方依賴,需要從外部引入spark-shell --jars /home/wangtuntun/下載/nscala-time_2.10-2.12.0.jar

原创 android靈活佈局

如何像在jsp頁面佈局一樣,在android界面佈局在res->layout文件夾下,新建xml文件。在src文件中設置佈局文件爲剛剛新建的xml文件<?xml version="1.0" encoding="utf-8"?> <Linea

原创 spark下dataframe轉爲rdd格式

dataframe可以實現很多操作,但是存儲到本地的時候,只能存 parquest格式需要存儲源格式,需要轉換爲rdd類型將dataframe中的每一行都map成有逗號相連的string,就變爲了一個rdd

原创 scala處理時間序列數據

傳統的java對於時間的操作是用Date類和Calender類但是使用很麻煩scala有一個包裝庫叫NScalaTime,他提供了JodaTime的一些語法。需要在maven庫中下載nscala的jar包然後import com.githu

原创 我的友情鏈接

51CTO博客開發

原创 pycharm導入第三方依賴

方法一:直接寫import語句,雙擊選中對應的依賴,alt+enter就會提示你安裝。如果不行,可以設置下:file->default settings->auto import方法二:到官網下載對應依賴,然後導入。導入過程:file->s