原创 面試題總結(2019-07-17)

1、LinkedList是單向的還是雙向的? 雙向,因爲有previous和next兩個方向的指針。 那面試官可能會接着問,那是雙向鏈表還是雙向重複鏈表呢? jdk1.6是雙向循環鏈表,head節點首尾相連;jdk1.7是雙向鏈表

原创 乾貨 | Flink及主流流框架比較

https://blog.csdn.net/aa5305123/article/details/83095275

原创 Hadoop相關WebUI端口記錄

以下均爲默認端口號,可根據配置文件修改: HDFS:50070 yarn:8088 Hive:10002 HBase:60010 Spark:8080 Flink:8081 Storm:8080

原创 VirtualBox6 安裝Centos7網絡設置

1、選擇NAT還是橋接? 我選的橋接,宿主機和虛擬機互相能夠ping通,詳細信息請另行查閱。 2、橋接怎麼配置 配置網卡 vi /etc/sysconfig/network-scripts/ifcfg-enp0s3 TYPE=

原创 yarn的原理和資源調度

https://blog.csdn.net/yunpiao123456/article/details/51802986

原创 記一次OOM的分析

前言 測試同學反饋測試環境不能正常訪問,查看日誌發現OOM。雖然是測試環境,但是還是排查了一下原因,以免線上也出同樣的問題。 處理步驟 1、保留現場 首先使用jmap -heap pid查看堆空間使用情況,結果發現年輕代和老年

原创 Hive表的分區與分桶

轉自:https://blog.csdn.net/lzm1340458776/article/details/43085423 1.Hive分區表 Hive使用select語句進行查詢的時候一般會掃描整個表內容,會消耗很多時間做沒必要的工

原创 HDFS高可用原理

https://blog.csdn.net/jarth/article/details/52839864 點贊 收藏 分享 文章舉報 KevanLiu 發佈了18 篇原

原创 yum國內鏡像配置

轉自:https://blog.csdn.net/anigon/article/details/54018733 yum默認鏈接的還是國外的鏡像,速度相對不理想,配置成國內的鏡像會快很多,這裏以阿里鏡像爲例進行配置: CentOS系統更換

原创 Hadoop Yarn 框架原理及運作機制

轉自:https://blog.csdn.net/liuwenbo0920/article/details/43304243 1.1 YARN 基本架構 YARN是Hadoop 2.0中的資源管理系統,它的基本設計思想是將MRv1中的Jo

原创 IntelliJ IDEA 控制檯亂碼問題解決

IntelliJ IDEA控制檯亂碼問題存在好久了。。。官方也不給解決下,坑了不少人,所以網上出現了很多解決辦法,不過都是差不多的內容,對於直接下載安裝Idea的玩家都能解決問題,但是如果你跟我一樣,使用ToolBox安裝的,那亂碼問題再

原创 Zookeeper的Quorum機制-談談怎樣解決腦裂(split-brain)

轉:http://suroot.cn/306.html 在使用zookeeper的過程中,我們經常會看到這樣一些說法: 1.zookeeper cluster的節點數目必須是奇數。 2.zookeeper 集羣中必須超過半數節點(Majo

原创 JVM類加載機制

轉:http://blog.csdn.net/ns_code/article/details/17881581 類加載過程     類從被加載到虛擬機內存中開始,到卸載出內存爲止,它的整個生命週期包括:加載、驗證、準備、解析、初始化、使用

原创 Kafka 設計與原理詳解

轉:https://blog.csdn.net/suifeng3051/article/details/48053965 一、Kafka簡介 本文綜合了我之前寫的kafka相關文章,可作爲一個全面瞭解學習kafka的培訓學習資料。 1 轉

原创 Java 8 Lambda實現原理分析

轉自:https://feiyeguohai.iteye.com/blog/1500108 爲了支持函數式編程,Java 8引入了Lambda表達式,那麼在Java 8中到底是如何實現Lambda表達式的呢? Lambda表達式經過編譯之