原创 在Linux(CentOS)下重置MySQL根(Root)密碼
1.首先輸入“service mysqld status”查看當前mysql服務狀態，下圖顯示正在mysqld服務正在運行中。 2.輸入“killall -TERM mysqld”命令停止所有的mysqld進程。 3.輸入“servi
2020-06-15 01:40:20
原创 批處理 rewriteBatchedStatements=true
最近在優化大批量數據插入的性能問題。 項目原來使用的大批量數據插入方法是Mybatis的foreach拼接SQL的方法。 我發現不管改成Mybatis Batch提交或者原生JDBC Batch的方法都不起作用，實際上在插入的時候仍然是一
2020-06-15 01:40:10
原创 java8 CompletableFuture_異步執行多個任務
前言 CompletableFuture是java8提供的基於異步操作的封裝，日常開發中怎能不用上一番呢。 1)聚合多個異步任務 需求：多個tab頁包含不同的表格數據，並且帶分頁，頁面首次加載時需要顯示第一頁數據，並且在tab頂上顯示總量
2020-06-15 01:40:10
原创 SparkStreaming創建DirectStream連接kafka時策略詳解
SparkKafka直接流(createDirectStream)和kafka分區 每個kafka主題分區對應一個RDD分區。 spark可以通過spark.streaming.kafka.maxRatePerPartition
2020-06-15 01:40:10
原创 hdfs跨集羣拷貝文件命令
hadoop distcp -D ipc.client.fallback-to-simple-auth-allowed=true -skipcrccheck -update -m 20 webhdfs://ip/user/hi
2020-06-15 01:40:10
原创 【Kafka】如何從指定時間開始消費Topic
如何從指定時間開始消費Topic使用前提使用實例 使用前提 0.10.1.1版本的kafka增加了時間索引文件，可以根據指定的時間戳計算出的Offset來訪問TopicPartition中的消息。 使用實例 public clas
2020-04-14 22:17:45
原创 字符編碼(ASCII、UNICODE、UTF-8)
轉自： 字符串和編碼 - 廖雪峯的官方網站 https://www.liaoxuefeng.com/wiki/1016959663602400/1017075323632896 因爲計算機只能處理數字，如果要處理文本，就必須先把文本轉
2020-02-21 21:06:32
原创 記錄一次系統上線的JVM調優
開發了大半年的數據中臺系統，近期在測試環境上線壓測，監控JVM時發現GC頻繁，開啓GC日誌後發現隔幾秒就要做一次Minor GC（對新生代內存進行回收），並且堆內存不到十分之一的時候就進行GC（測試-Xmx設置爲10g,使用不到1
2019-07-30 02:56:03
原创 IDEA最新激活碼
下載 jetbrainsideaIU-2018.3.2.exe 激活碼(3101個字符全部複製有效) N757JE0KCT-eyJsaWNlbnNlSWQiOiJONzU3SkUwS0NUIiwibGljZW5zZWVOYW1lIjo
2019-07-30 02:56:03