原创 HBase1.4.12
介紹 當您需要對大數據進行隨機、實時的讀寫訪問時，請使用Apache HBase™。該項目的目標是在普通硬件集羣上託管非常大的表(數十億行X數百萬列)。Apache HBase是一個開源的、分佈式的、版本化的、非關係型數據庫，它模仿了谷歌
2020-06-21 02:01:58
原创 Hive優雅的處理Json數據
準備數據 1SOH{"name":"aaa","cource":"english","score":"90"},{"name":"bbb","cource":"chinese","score":"80"},{"name":"ccc",
2020-06-21 02:01:58
原创 Hue4.2.0
介紹 Hue是一個基於web的交互式查詢編輯器，允許您與數據倉庫進行交互 參考 https://gethue.com/ https://github.com/cloudera/hue https://docs.gethue.com/
2020-06-21 02:01:58
原创 Spark on Hive with Thriftserver
一、複製Hadoop配置文件（core-site.xml，hdfs-site.xml，hive-site.xml）到Spark的conf下 二、複製Hive的mysql-connector-java-5.1.40-bin.jar到S
2020-06-21 01:27:21
1
原创 基於Zookeeper客戶端Curator監聽節點上下線
Apache Curator是Apache ZooKeeper(一種分佈式協調服務)的Java/JVM客戶端庫。它包含一個高級的API框架和實用程序，使Apache ZooKeeper的使用更加容易和可靠。它還包括常見用例和擴展(如服務發
2020-06-21 01:27:21
原创 Hue整合HBase
Hue安裝 關於Hue的編譯和安裝詳見我的另一片博客：https://blog.csdn.net/DataIntel_XiAn/article/details/103543368 配置Hue [hbase] hbase_clu
2020-06-21 01:27:20
1
原创 Mybatis批量數據插入
Controller /** * @ClassName: UserController * @Description: * @Author: xuezhouyi * @Version: V1.0 **/ @RestCont
2020-06-21 01:27:20
原创 SpringBoot中手動實現JDBC連接池
創建一個工具類：JDBCUtils package com.example.demo.Util; import lombok.extern.slf4j.Slf4j; import java.io.InputStream; impor
2020-06-21 01:27:20
原创 修改SpringBoot中RedisTemplate默認序列化爲Json
背景 最近在使用redis保存對象時發現，對象是被序列化之後存入到redis中的，這樣就不能直觀的看到對象的屬性信息，所以還是希望使用簡單的json格式來保存對象到redis中。 那讓我們來查看一下SpringBoot中默認的RedisT
2020-06-21 01:27:20
原创 Java進程查看命令之jps
語法結構： C:\Users>jps -help usage: jps [-help] options:命令選項，用來對輸出格式進行控制 jps [-q] [-mlvV]
2020-06-21 01:27:20
原创 Spark優化總結
Spark優化 主要分爲兩個方面的優化，一是代碼邏輯的優化，二是資源配置的優化 1.代碼邏輯 1.1.RDD優化 RDD優化主要也有兩個方面的考慮，一是RDD的複用，二是RDD的持久化。那麼主要針對RDD的持久化進行說明。在Spark中多
2020-06-21 01:27:20
原创 MyBatis Generator在Maven聚合項目中的最佳實踐
參考 http://mybatis.org/generator/running/runningWithMaven.html https://github.com/GuoGuiRong/mybatis-generator-lombok-pl
2020-06-21 01:27:10
1
原创 MySQL分區表(理論+實戰)
參考 https://dev.mysql.com/doc/refman/5.7/en/create-table.html#create-table-partitioning 分類 1.HASH 哈希一個或多個列，以創建用於放置和定位行
2020-06-21 01:27:10
原创 Presto-0.228
介紹 Presto是一個運行在機器集羣上的分佈式系統。完整的安裝包括一個協調程序和多個工作程序。查詢從客戶端(如Presto CLI)提交到協調器。協調器解析、分析和計劃查詢執行，然後將處理分配給工作者。 安裝包下載 https://
2020-06-21 01:27:10
原创 Redis3.2.6安裝
安裝包 redis-3.2.6.tar.gz 解壓 tar -xzvf redis-3.2.6.tar.gz 安裝gcc和make yum install -y gcc yum install -y make 編譯（在根
2020-06-21 01:27:10