原创 Spark standalone初體驗2 -Spark 提交任務設置參數

Spark 提交任務設置參數 MASTER=spark://rhel731:7077 spark-shell --executor-cores=3 --total-executor-cores 9 MASTER參數指定 集羣的m

原创 CentOS 6.7Spark 單機模式環境搭建

Spark 單機模式環境搭建 目錄Spark 單機模式環境搭建1.下載Spark安裝包2.配置環境變量3.安裝scala和python4.設置conf5.啓動集羣5.1 啓動master5.2 啓動slave6. spark-sh

原创 Leecode 560 和爲K的子數組個數

題目說明: 給定一個整數數組和一個整數 k,你需要找到該數組中和爲 k 的連續的子數組的個數。 示例 1 : 輸入:nums = [1,1,1], k = 2 輸出: 2 , [1,1] 與 [1,1] 爲兩種不同的情況。 說明

原创 Kafka java調用生產者和消費者API

Kafka 使用命令行 1.搭建環境 在自己的Vmware上搭建一個kafka環境 1.下載kafka 2.啓動kafka自帶的zookeeper 進入kafka安裝目錄: bin/zookeeper-server-sta

原创 ACID規則簡單理解

目錄關係型數據庫遵循ACID規則TRANSACTION(事務)RDBMS隔離級別設置三種不考慮隔離出現的問題:1.髒讀2.不可重複讀3.幻讀 關係型數據庫遵循ACID規則 TRANSACTION(事務) 事務在英文中是transa

原创 Zookeeper官方文檔學習

目錄Zookeeper 3.5官方文檔學習介紹Design Goals(設計目標)Data model and the hierarchical namespace(數據模型和分層名稱空間)Nodes and ephemeral

原创 Hive通過JDBC調用執行操作

Hive JDBC 1.導入pom依賴 <dependency> <groupId>org.apache.hive</groupId> <artifactId>hive-jdbc

原创 OGG的defgen工具使用

目錄defgen1.創建參數文件2.執行命令生成3.查看生成文件的內容總結 defgen 官網介紹鏈接:link. 要在目標端執行列映射和轉換,請使用在源上生成的source-definitions文件將源定義提供給Replica

原创 SpringMvc 部分註解的理解

目錄SpringMvc註解1.@Valid2.@RequestParam3.@PathVariable4.@RequestBody5.@RestController6.@ResponseBody7.@RequestMapping8

原创 LeeCode 599 N叉樹的最大深度與 104 二叉樹的最大深度

二叉樹的最大深度 比較簡單,二叉樹的最大深度,等於左子樹的最大深度和右子樹的最大深度這兩者的較大者,加一。 可用遞歸求解 public int maxDepth(Node root) { if(root == null)

原创 GreeenPlum數據庫入門初體驗

公司需要用到OGG 傳輸Oracle數據到GreenPlum上。 所以在公司主機上安裝了一個GreenPlum假分佈式集羣 path: /opt/greenplum-db 配置文件 /app/gpdata/master/gpseg

原创 LeeCode 405:數字轉換爲十六進制數

package LeeCode; /** * @ClassName ToHex * @Description 給定一個整數,編寫一個算法將這個數轉換爲十六進制數。對於負整數,我們通常使用 補碼運算 方法。 * 注意: *

原创 LeeCode371 位運算之 “與”運算 + “異或”運算

題目: 不使用運算符 + 和 - ​​​​​​​,計算兩整數 ​​​​​​​a 、b ​​​​​​​之和。 示例 1: 輸入: a = 1, b = 2 輸出: 3 示例 2: 輸入: a = -2, b = 3 輸出: 1 這

原创 LeeCode 191. 位1的個數 引發的位運算與二進制的思考

題目要求:       編寫一個函數,輸入是一個無符號整數,返回其二進制表達式中數字位數爲 ‘1’ 的個數(也被稱爲漢明重量)。 示例 1: 輸入:00000000000000000000000000001011 輸出:3 解釋:輸入

原创 Oracle入門初試

目錄 1.1建表語句: 建表語句①: 建表語句②: 1.2 表中數據 插入語句① 二、Oracle Commit 2.1什麼是Commit 2.2 何時使用Commit 2.3 如何使用Commit Oracle數據庫大小寫敏感 1.1