原创 Linux 怎麼根據進程號，找對應的進程
轉自：https://zhidao.baidu.com/question/319997156.html 1）說明： Linux的所有進程都保存在/proc/目錄下，保存形式爲：/proc/進程號。進入到進程號目錄後，裏面有一個cwd鏈接文
2019-02-20 13:01:25
原创 mysql-connector-java各種版本下載地址
原文：https://blog.csdn.net/Milan__Kundera/article/details/81182757 mysql-connector-java下載地址： http://mvnrepository.com/art
2019-02-19 21:15:44
原创 spark-submit提交到yarn上常見錯誤
#!/bin/bash systime=`date -d "-24 hour" +%Y%m-%d-%H-%M` ym=`echo ${systime} | awk -F '-' '{print $1}'` d=`echo ${systi
2019-01-31 13:38:04
原创 Scala常用方法大全（附代碼案例）會不定時更新
轉自：https://blog.csdn.net/JENREY/article/details/80727168 1.flatten 可以把嵌套的結構展開. scala> List(List(1,2),List(3,4)).flatten
2019-01-31 13:38:04
3
原创 ElasticSearch 性能調優
從 10 秒到 2 秒！ElasticSearch 性能調優 “ELK”是 ElasticSearch、Logstash、Kibana 三門技術的簡稱。如今 ELK 技術棧在互聯網行業數據開發領域使用率越來越高，做過數據收集、數據開發、數
2019-01-18 18:22:51
原创 spark任務找錯方法
ps：spark要是主從切換的配置，需要把兩個master都啓動了（比如說節點1是alive,2是standby） 啓動的步驟是 在節點1 spark的sbin目錄下 start-all.sh 後，還需要在點2的sbin下啓動 start
2019-01-17 17:02:49
原创 [問題記錄]log4j使用記錄
轉自：https://blog.csdn.net/yeweiouyang/article/details/53645458 步驟一：maven配置依賴 https://mvnrepository.com/artifact/log4j/lo
2019-01-16 16:59:12
原创 當項目上傳到gitlab後，從gitlab上下載、上傳的步驟（使用idea）
轉自：https://blog.csdn.net/weixin_39430584/article/details/82626463 轉自: http://blog.cnbluebox.com/blog/2014/04/15/gitlab
2019-01-16 16:59:12
23
原创 將本地項目上傳到自己公司的gitlab(或是官網gitlab)下（第一次上傳）
轉自：https://blog.csdn.net/litianxiang_kaola/article/details/74075151 自己公司的gitlab和官網gitlab都是以下的操作步驟！(我是自己公司的gitlab已成功) 1、
2019-01-14 14:04:20
原创 mysql卸載後再次安裝（5.5跟5.7版本安裝步驟不一樣）注意事項！！！！
具體看：https://blog.csdn.net/cxy_Summer/article/details/70142322 安裝後記得在 環境變量 中進行mysql_home和path配置 path 然後在 管理--》服務 找到
2019-01-09 21:25:13
原创 操作hadoop常用的命令
1.查看hdfs某一文件夾的大小： hadoop fs -du -h /路徑 2.查看文本的前十行、後十行....... 隨機返回指定行數的樣本數據 hadoop fs -cat /test/gonganbu/scene_ana
2019-01-07 22:53:02
原创 scala創建maven項目 常用pom文件
注意自己scala的版本與集羣版本是否匹配 不匹配會報錯 我的是scala 2.11.8 hadoop2.7.2 spark-2.1.1 <?xml version="1.0" encoding="UTF-8"?> <proj
2019-01-04 18:53:49
原创 顯示當前時間（按照秒算）
package emg.branchs.test import java.time.{LocalDateTime, ZoneOffset} /** * @Auther: sss * @Date: 2019/1/4 13:49
2019-01-04 18:53:49
原创 HQL的列轉行和行轉列
轉自：https://blog.csdn.net/weixin_38653290/article/details/84639754 列轉行 測試數據 hive> select * from col_lie limit 10; OK
2019-01-02 19:50:10