原创 Hive創建UDTF函數
Hive創建UDTF函數 文章目錄Hive創建UDTF函數參考： 這部分不知道建一個什麼樣的函數，就照着網上的來了，所以就不寫其他東西了 package com.chinasofti.hive.udf; import org.a
2020-07-05 04:51:25
原创 Oracle 學習之 MODEL
Oracle 學習之 MODEL 文章目錄Oracle 學習之 MODEL概念官網格式自己用到的簡略版格式官網例程練習1. 通過具體的維度進行四則運算2. 直接賦值3. 新生成的字段(左邊)中指定範圍，使用 <、>、<=、>=4.
2020-07-05 04:51:25
原创 Hadoop Federation（聯邦）
Hadoop Federation（聯邦） 單 NameNode 的架構使得 HDFS 在集羣擴展性和性能上都有潛在的問題，當集羣大到一定程度後，NameNode 進程使用的內存可能會達到上百 G，NameNode 成爲了性能的瓶
2020-02-26 00:23:03
原创 Hadoop HA
Hadoop HA 文章目錄Hadoop HA概述Namenode HANamenode HA 詳解架構上的修改：Failover ControllerZKFailoverController 主要職責：YARN HA 概述 HA
2020-02-26 00:23:03
原创 Hive安裝部署
Hive安裝部署 博客資源： Hive的安裝包和源碼包： 鏈接：https://pan.baidu.com/s/13xvIMzJ69PZUJ75Eo11cHQ 提取碼：olnl Hive連接MySQL的驅動： 鏈接：https:/
2020-02-26 00:23:03
原创 Hive的基本操作
Hive的基本操作 1. DDL 操作 1.1． 創建表 建表語法： CREATE [EXTERNAL] TABLE [IF NOT EXISTS] table_name [(col_name data_type [COMME
2020-02-26 00:22:53
原创 Hive練習
Hive練習 文章目錄Hive練習博客資源：創建表創建分區表創建單分區表創建多個分區表創建分桶表開啓分桶功能創建分桶表映射數據：多重插入：動態分區Hive數據導出Hive的本地模式 博客資源： 一些自己編造的數據，還有一個從朋友那
2020-02-26 00:22:53
原创 Hive表與內部數據的映射關係
Hive表與內部數據的映射關係 1. 在練習Hive之前，先創建一個文件夾來存放Hive的練習數據。 命令：cd /export/data/ ，然後創建對應文件夾： mkdir hivedata 2. 進入hivedata文件夾
2020-02-26 00:22:53
原创 MapReduce 優化參數
MapReduce 優化參數 文章目錄MapReduce 優化參數資源相關參數以下參數是在用戶自己的 MapReduce 應用程序中配置就可以生效以下參數應該在 yarn 啓動之前就配置在服務器的配置文件中才能生效shuffle
2020-02-26 00:22:53
原创 HDFS 元數據管理機制
HDFS 元數據管理機制 文章目錄HDFS 元數據管理機制元數據管理概述元數據目錄相關文件dfs.namenode.name.dirVERSIONseen_txidFsimage & editssecondary namenode
2020-02-26 00:22:53
原创 Hive的幾種啓動方式
Hive的幾種啓動方式 A. shell客戶端啓動 使用命令：/export/server/hive/bin/hive 直接啓動。 B. 遠程訪問Hive shell客戶端啓動只能啓動本機上的Hive，如果要在別的客戶端上啓動，
2020-02-26 00:22:53
原创 Hive中文亂碼解決
Hive中文亂碼解決 在練習Hivesql語句時，發現中文插入亂碼。 首先查看文件的編碼格式 使用命令：cd /export/data/hivedata/ 進入數據存儲位置 然後使用命令：file t_map.txt 發現文件編碼
2020-02-26 00:22:53
原创 Oracle 去除字符--TRIM、LTRIM、RTRIM
Oracle 去除字符–TRIM、LTRIM、RTRIM 文章目錄Oracle 去除字符--TRIM、LTRIM、RTRIM1. TRIM2. LTRIM3.RTRIM 1. TRIM 功能：去除指定位置的指定字符。 TRIM([
2020-02-26 00:22:53
原创 Oracle編程藝術學習筆記—01
Oracle編程藝術學習筆記—01 文章目錄Oracle編程藝術學習筆記—01環境準備1. 按書中所示，先創建一個eoda用戶，並賦予相關權限2. 以 eoda 身份登錄，然後創建 SCOTT 用戶下的四張表3. 設置每次啓動時都
2020-02-26 00:22:53
原创 Oracle報錯：ORA-00911: invalid character
Oracle報錯：ORA-00911: invalid character 該錯誤發生在我創建物化視圖時報錯。 執行環境爲PL SQL，Oracle版本爲11g。 錯誤重現： -- 代碼1 CREATE MATERIALIZED
2020-02-26 00:22:53