原创 spark內核解密

spark內核架構 schulebackend acuter driver:(application=driver+executor)standalone是spark自帶的,效率比其他的好,一個計算框架就可以了、yarn SparkCo

原创 瑜伽練習

    堅持連續練習瑜伽3天,我就懷疑每天練習這樣好嗎?前三天發現我左膝蓋有點疼,用力的時候腰部有點微微疼,估計是突然運動過度的原因,所以我昨天就沒去,今天白天感覺好多了,剛開始的時候看着別人每個動作都做的很到位,漂亮,所以要去自己極致,

原创 (spark)Wordcount

準備將word文檔傳上來

原创 《大學》全文

第一章 大學之道,在明明德,在親民,在止於至善。   知止而後有定,定而後能靜,靜而後能安,安而後能慮,慮而後能得。物有本末,事有終始。知所先後,則近道矣。   古之慾明明德於天下者,先治其國;欲治其國者,先齊其家;欲齊其家者,先修其身;

原创 java mongodb groupby分組查詢

java mongodb groupby分組查詢 mongodb,聚合查詢 命令格式: db.COLLECTION_NAME.aggregate(AGGREGATE_OPERATION) 示例:db.COLLECTION_NAME.a

原创 Hadoop cluster(第一篇)Hadoop cluster in Local(Standalone) Mode

    按照Hadoop官網start Hadoop cluster ,參考鏈接http://hadoop.apache.org/docs/current/hadoop-project-dist/hadoop-common/SingleC

原创 oracle中的幾個函數

1、with  ...as .. with temp as (select * from table1 where 1=1)  select * from temp 2、union 和 union all Union:對兩個結果集進行並集

原创 sql中使用了關鍵字報錯 SQL Error: 1064, SQLState: 42000

SQL Error: 1064, SQLState: 42000 這個報錯一般是sql有問題,符號方面的問題(字段、庫表命名的問題) https://blog.csdn.net/xk_moving/article/details/8902

原创 2018年3月1日(紀念一下)

        工作以來,第一次名譽上升職:臨時小組長。其實,我還是一個很容易被大家看得起的小兵。工作以來也是不斷的受到肯定,2015年我在某公司也曾被提名擔任小組長,2016年又一次提名擔任小組長,並代理了1個月時間。現在這個事兒又落在

原创 Scala繼承知識點

抽象類可以繼承抽象類 1。父類一般都是抽象的,有時候一寫框架會把父類作爲一些類,空實現,框架不要求寫什麼代碼就能跑起來。 2。抽象類 父類會封裝很多方法,很多父類的方法子類都是可以複用的,當然還是有權限的問題。Spark中 所有的RDD的

原创 第一週總結(2018-2-27~2018-3-2)

    完成:1、Wordcount程序開發環境搭建,eclipse+intellj  idea2、wordcount程序開發,本地單機運行,出統計結果3、結合源碼追蹤Wordcount中RDD數據流,並作出簡單圖示    遺留問題:1、

原创 workcount中遇到的一個問題(關於版本)

Exception in thread "main" java.lang.NoSuchMethodError: scala.Predef$.refAr

原创 Scala與我緣起2016年11月21日

新的旅程,新的開始     從今天起我開始寫學習技術博客,在這兒要感謝兩個人,一個是我的閨蜜,另一個是我的王老師,謝謝你們,在你們的啓發之下我有了新的經歷——利用網絡記錄我的技術之旅!!!   事情要從11月中旬說起,當時我工作不

原创 解決ie瀏覽器對get請求攜帶的中文參數沒有進行編碼的問題

本文鏈接:https://blog.csdn.net/qq_43612658/article/details/89504751 <script> function isIE(){ //獲取當前瀏覽器相關信息

原创 第18周總結:2018-06-25~2018-06-29

完成:1、手寫數字識別2、線性代數中的向量點積、外積3、世界盃已經過去半個月了,看了2場小組賽:法國-丹麥、阿根廷-尼日利亞。期待1/8決賽 阿根廷-法國