原创 Yarn架構 + 執行流程

學習筆記 參考文章:YARN的架構及原理----詳細 參考文章:Yarn的運行原理(執行流程) 一、Yarn架構 1)ResourceManger:RM 整個集羣同一時間提供服務的RM只有一個,負責集羣資源的統一管理的調度 1、處理客戶端

原创 Java中的static方法訪問特點 + static變量特點

學習筆記:僅static訪問特點 目錄 1、static修飾的方法訪問特點 2、static變量的特點 參考文章:Java中的static關鍵字解析 static是一個修飾符,static關鍵字是靜態的意思,可以修飾成員方法,成員變量

原创 Java中int和String相互轉換

基本類型包裝類最常見的操作就是:用於基本類型和字符串之間的相互轉換 1、int轉爲String public static String valueOf(int i) {}:返回int參數的字符串表示形式,該方法是String類中的方法 2

原创 Java中創建文件/目錄刪除文件/目錄方法(File類)

File:它是文件和目錄路徑名的抽象表示 文件和目錄是可以通過File封裝成對象的 對於File而言,其封裝的並不是一個真正存在的文件,僅僅是一個路徑名而已。它是可以存在的,也可以是不存在的。將來是要通過具體的操作把這個路徑的內容轉換爲

原创 Java—字節流讀寫數據

學習筆記:字節流。 字節流抽象基類: - public abstract class InputStream implements Closeable {} //OutputStream是所有字節輸入流的超類 - public abstra

原创 Java中String類常用方法 + StringBuilder與String的相互轉換

學習筆記:String類常用方法 + StringBuilder與String的相互轉換 String 類代表字符串。對於Java String不是一個基本數據類型,它是一個引用數據類型。String 類在java.lang包下,使用時不需

原创 Java中的Collections類常用語法--針對List集合

學習筆記:Collections類語法記錄 Collections是針對List集合操作的工具類,此類僅包含靜態方法。使用該類的方法時,可以類名.方法名 //Collections構造方法 private Collections() {

原创 Java中的泛型類、泛型方法、泛型接口

學習筆記:泛型方法 泛型的本質是參數化類型,在使用或者調用的時候才傳入參數類型。這種參數類型可以用到類、方法、接口中,分別稱爲泛型類、泛型方法、泛型接口。 泛型的定義格式: <類型>:指定一種類型的格式,這裏的類型可以看成是形參。 <類型

原创 Java中的內部類 + 匿名內部類

學習:僅總結語法 內部類就是在一個類中定義一個類. 1、內部類的訪問特點: 內部類可以直接訪問外部類的成員,包括私有 外部類要訪問內部類的成員,必須創建對象 2、內部類的分類: 按照內部類在類中定義的位置不同,可以分爲如下兩種方式 在類的

原创 Java中的Array數組

本文僅介紹語法,無內存分析,引用傳遞。僅學習記錄 數組是同一種類型數據的集合,其實數組就是一個容器,數組可以自動給數組中的元素從0開始編號,方便操作這些元素。 java中的數組,必須先初始化,才能使用,所謂初始化,就是爲數組中的數字元素分配

原创 Java中的集合分類及常用方法

集合類特點:提供了一種存儲空間可變的存儲模型,存儲的數據容量可以隨時發生改變 集合分爲單列集合(collection集合),雙列集合(map集合),單列集合包括set集合和list集合。 集合都是接口,並不能直接創建對象。需要知道它的實現

原创 HDFS常見的shell操作_學習筆記

1、-ls顯示目錄信息 查看HDFS根目錄下面的文件 [root@bigdata03 ~]# hadoop fs -ls / Found 14 items drwxrwxrwx - root root

原创 SQL優化 MySQL版 ,explain SQL執行計劃詳解

目錄 一、執行計劃分析 二、SQL執行計劃中的參數講解——explain中的id 1、id值相同,從上往下順序執行。 2、ID值不同,id值越大越優先查詢 3、id值有相同,又有不同。id值越大越優先;id值相同,從上往下順序執行 二、

原创 HBase架構詳解及讀寫流程

目錄 一、HBase存儲結構詳解 二、HBase寫流程 三、HBase讀流程 Hbase是bigtable的開源山寨版本。是建立的hdfs之上,提供高可靠性、高性能、列存儲、可伸縮、實時讀寫的數據庫系統。 它介於nosql和RDBMS之

原创 HBase中的StoreFile什麼時間合併__學習筆記

前言:圖片是HBase架構圖,建議結合架構圖,理解StoreFile 的合併 概述 HBase 根據合併規模將 Compaction 分爲了兩類:MinorCompaction 和 MajorCompaction。 Minor Compa