原创 Linux 部分生僻參數 原圖整理
目錄: 圖書館查閱Linux運維資料來的，把一知半解的記錄起來。1、 關機、重啓、：2、tree 命令參數組合3、linux 命令行組成結構4、tail -n 指定顯示的行數 tail -n +15 /etc/password5、
2020-05-19 23:13:39
原创 數據集市 與 數據倉庫 區別
默認主題級： 數據集市： 數據集市是一種微型的數據倉庫，它通常有更少的數據，更少的主題區域，以及更少的歷史數據，因此是部門級的，一般只能爲某個局部範圍內的管理人員服務。 爲管理者提供支持決策： 數據倉庫： 數據倉局是企業級的，能爲
2020-05-18 23:11:56
原创 Presto 概念 及 架構
文章目錄:一、概念：1.1 Presto概念1.2 Presto應用場景1.3 Presto的架構組成部分：1.4 Presto 優點：Presto 缺點：二、Presto優化2.1數據存儲2.2 查詢SQL優化2.3 無縫替換
2020-05-18 23:11:56
原创 Hadoop combine函數的作用
combine分爲map端和reduce端，作用是把同一個key的鍵值對合併在一起，可以自定義的。 combine函數把一個map函數產生的<key,value>對（多個key,value）合併成一個新的<key2,value2
2020-05-18 23:11:56
原创 Hive 企業級 參數調優專篇 .
Hive 企業級調優點整理 目錄:Hive 企業級調優點整理1、Fetch 抓取2、本地模式1)開啓本地模式，並執行查詢語句2）關閉本地模式，並執行查詢語句3、表的優化4、MapJoin5、 Group By數據傾斜文章：6、 C
2020-05-18 23:11:56
原创 shell 腳本學習 二
文章目錄:一、Linux 變量的使用及狀態碼二、 echo 注意點三、重定向輸入和輸出② 輸出重定向分爲步驟：③ 輸入重定向四、數學運算符 expr 命令狀態碼：“2”代表一般性未知錯誤。（詭異性報錯）要解決這個問題，對於那些
2020-05-18 23:11:56
原创 關於 HDFS 副本數概念 《學習與理解》
一、HDFS數據副本概念： HDFS數據副本存放策略，副本的存放是HDFS可靠性和高性能的關鍵。優化的副本存放策略是HDFS區分於其他大部分分佈式文件系統的重要特性。這種特性需要做大量的調優，並需要經驗的積累。 HDFS採用一種稱
2020-05-17 22:48:07
原创 IO流學習與理解
前言 ：首先IO兩字母得理解下，別面試官問（IO字母）的含義及全稱是什麼一臉懵。 I所謂的就是input. O所謂就是Output. 1.File類的使用 2.IO流原理及流的分類 3.節點流（或文件流） 4.緩衝流 5.轉換流
2020-05-17 22:48:07
原创 kettle 基礎知識學習
前言：Kettle是一款國外開源的ETL工具，純java編寫，可以在Windows、Linux、Unix上運行，數據抽取高效穩定。 Kettle 中文名稱叫水壺，該項目的主程序員MATT 希望把各種數據放到一個壺裏，然後以一種指定
2020-05-17 22:48:07
原创 SQL 子查詢 詳細整理
子查詢分爲兩種: 非相關子查詢(獨立子查詢) 相關子查詢 ①獨立子查詢可以單獨執行,所以先執行後,得到的 整個查詢中子查詢只執行一次，執行完後再執行外層查詢； ②相關子查詢是指子查詢(內層查詢)中引用了外層查詢所引用表
2020-05-17 22:48:07
原创 Linux 實用命令 及 權限 理解
目錄:前言：1、 Linux內核是系統的核心，控制着內存、程序和硬件之間的交互。2、 你將會發現Linux使用正斜線（/）而不是反斜線（\）在文件路徑中劃分目錄。在Linux中，反斜線用來標識轉義字符，要是用在文件路徑中的話會導致
2020-05-16 22:46:34
原创 Linux Vim 編輯頁中 命令實用
目錄:前言：vim編輯器有兩種操作模式：普通模式插入模式一、Vim 基礎二、編輯數據三、複製和黏貼四、總結：使用p命令來粘貼。複製命令是y。 【轉載註明出處，尊重原創 】 【作者水平有限，如有錯誤歡迎指正 .】 前言：vim編輯
2020-05-16 22:46:34
原创 關於 JDK 解說整理
前言：今天面試有道題是問什麼是JDK，我瞬間拿出手機來看看趕緊拿回去，瑟瑟發搜。。回來好好整理下！！！ 對jdk和jre的理解 1、JDK是Java Development Kit，它是功能齊全的Java SDK。它擁有JRE所擁
2020-05-15 21:10:21