原创 linux mkfs.xfs: cannot open /dev/sdm: Device or resource busy

https://blog.csdn.net/man_in_the_night/article/details/86570882   問題:之前服務器 做過ceph,之後格式化磁盤,數據盤作raid0。系統裝好後,查看設備信息。 lsblk

原创 sparksql:函數使用-1

函數查詢: https://spark.apache.org/docs/2.3.0/api/sql/index.html#map concat_ws: 用指定的字符連接字符串 例如: 連接字符串: concat_ws("_", field

原创 zabbix-agent 啓動報錯,報錯查詢方法

啓動命令: > systemctl start zabbix-agent 報錯: Job for zabbix-agent.service failed because a configured resource limit was ex

原创 sparksql:去重row_number,生成排序序號 :RANK, DENSE_RANK, ROW_NUMBER的區別

https://blog.csdn.net/qq_39869388/article/details/80422472 去重: select date,phone from (select *,row_number() over (part

原创 shell 相關例子

Shell語句可以直接寫在命令行上 for i in `ls`; do echo "$i\n"; done 注意用分號隔開 清除文件 1. > access.log 2. cat /dev/null > access.log 3. cp

原创 mongo 磁盤滿,導致mongo掛了,重啓報錯

 mongod --config /local/hadoop/var/lib/hdfs/data/mongodb/mongodb/conf/share1.conf  mongod --config /local/hadoop/var/l

原创 sql 判斷兩個時間段是否有重合,是否存在交集

https://blog.csdn.net/qq_33896101/article/details/82012300   總結起來就一句話:最小值小於最大值並且最大值大於最小值,則一定重疊。 我的使用場景: A 表 將時間有交叉的數據查出

原创 linux:/var/log 日誌多,如何處理?rsyslog,logrotate

https://zhuanlan.zhihu.com/p/92804167 rsyslog負責寫入日誌, logrotate負責備份和刪除舊日誌, 以及更新日誌文件 Linux的日誌記錄了用戶在系統上一切操作,看日誌去分析系統的狀態是運維

原创 ive時間操作函數:獲取小時差.天數差

https://blog.csdn.net/wrty1993/article/details/78548312 1.首先hive獲取當前時間的函數與sql 不一樣 sql是:now(); (1) hive有一個獲得當前時區的UNIX時間戳

原创 打不開postman了,如何處理?

Delete the local data Delete the Postman folder(s), found at the below locations depending on your operating system.  m

原创 sql中where和having的區別

https://segmentfault.com/a/1190000008284099 https://juejin.im/post/5c052cb5f265da6120619545 誤區:不要錯誤的認爲having和group by

原创 shell 日期循環

#!/bin/sh if [ $# == 2 ]; then     datebeg=$1     dateend=$2 else     echo "請輸入開始時間和結束日期,格式爲2017-04-04"     exit 1 fi b

原创 SecureCRT連接Linux顯示Mysql記錄中文亂碼

1和2確認都是utf-8 後,3裏面,我採用備註2的方式最快 一 查看Linux主機系統字符集 echo $LANG en_US.UTF-8 二  ssh客戶端character encoding默認設置爲default,只要改成指定U

原创 sparksql : 數據庫表連接的簡單解釋

表的連接分成好幾種類型。 內連接(inner join) 外連接(outer join) 左連接(left join) 右連接(right join) 全連接(full join) 只返回兩張表匹配的記錄,這叫內連接(inner jo

原创 Mysql 插入中文錯誤:Incorrect string value: '\xE7\xA8\x8B\xE5\xBA\x8F...' for column 'course' at row 1

1. 確定數據庫編碼 Incorrect string value: '\xE7\xA8\x8B\xE5\xBA\x8F...' for column 'course' at row 1 出現這個錯誤的原因是,數據庫的編碼格式爲latin