【Hadoop】常用端口

原創

2020-02-20 17:17

1、HDFS頁面：50070

2、YARN的管理界面：8088

3、HistoryServer的管理界面：19888

4、Zookeeper的服務端口號：2181

5、Mysql的服務端口號：3306

6、Hive.server1=10000

7、Kafka的服務端口號：9092

8、azkaban界面：8443

9、Hbase界面：16010,60010

10、Spark的界面：8080

11、Spark的URL：7077

站內首發文章

發佈了369 篇原創文章 · 獲贊 1728 · 訪問量 150萬+

他的留言板關注

發表評論

所有評論

還沒有人評論，想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.

相關文章

hadoop入門--使用Apache Pig統計每個航班班次

案例基於hadoop 2.73，僞分佈式集羣 1，數據包導入hadoop集羣hdfs的/user/root目錄下 hdfs dfs -copyFromLocal 2008.csv /user/root 2，編寫totalmile

2020-07-01 19:19:14

hadoop入門--通過Apache Flume向HDFS存儲數據

本筆記基於Hadoop2.7.3，Apache Flume 1.8.0。其中flume source爲netcat，flume channel爲memory，flume sink爲hdfs。 1，配置flume代理文件配置一個

2020-07-01 19:19:14

MapReduce數據分析（5）平均值

五、MapReduce第五講：平均值（Avg）平均值的話就是通過寫MapReduce代碼來進行數據的平均值下面我們通過案列來講解一下吧！案列：對聯通流量數據進行分析，要求編寫MapReduce代碼對數據處理，輸出手機號、上行

2020-06-23 10:17:16

MapReduce數據分析（6）共同好友

六、MapReduce第六講共同好友（Common friends）某某社交網站，有如下用戶好友關係： A:B,C,D, F,E,O B:A,C,E,K C:F,A,D,I D:A,E,F,L E:B,C,D,M,L F:A,

2020-06-23 10:17:13

MapReduce數據分析（4）最大值

四：MapReduce第四講：Max（最大值）最大值的話小編沒有什麼可以說的，我相信大家都明白，這次我就直接上案列和代碼了。數據如下：案列：編寫MapReduce代碼獲得每年的最高氣溫。代碼： package demo;

2020-06-23 10:17:13

MapReduce數據分析（10）綜合實戰

十、MapReduce綜合實戰綜合實戰：環境大數據案列目的 1.學會分析環境數據文件； 2.學會編寫解析環境數據文件並進行統計的代碼； 3.學會進行遞歸MapReduce。案例要求要求實驗結束時，每位學生均已

2020-06-23 10:17:13

MapReduce數據分析（1）單詞計數

一、MapReduce第一講WordCount（單詞計數）在這裏小編做一下簡介：MapReduce計算框架。 MapReduce是面向大數據並行處理的計算模型、框架和平臺，它隱含了以下三層含義： 1）MapReduce是一個基於

2020-06-23 10:17:13

MapReduce數據分析（2）二次排序

二、MapReduce 第二講Secondary sort（二次排序）接下來，我們先講一下二次排序的原理。 MR默認會對鍵進行排序，然而有的時候我們也有對值進行排序的需求。滿足這種需求一是可以再reduce階段排序收集過來的va

2020-06-23 10:17:13

MapReduce數據分析（3）計數器

三、MapReduce第三講Counter（計數器）在寫代碼之前我先講一下： MapReduce計數器是什麼？計數器是用來紀錄job任務的執行進度和狀態。它的作用可以理解爲日誌，我們可以再進程中插入計數器，來紀錄數據的變化

2020-06-23 10:17:13

MapReduce數據分析（8）TopN

八、MapReduce第八講TopN 本次教程主要講TreeMap方法：在搜索引擎領域中，常常需要統計最近最熱門的K個查詢詞，這就是典型的“TopN”問題，也就是從海量查詢中統計出現頻率最高的前K個。該問題可分解成兩個MapRe

2020-06-23 10:17:12

MapReduce數據分析（9）數據去重

九、MapReduce第九講數據去重（）實現原理分析： map函數數將輸入的文本按照行讀取，並將Key–每一行的內容輸出 value–空。 reduce 會自動統計所有的key,我們讓reduce輸出key-

2020-06-23 10:17:12

MapReduce數據分析（7）Join操作

七、MapReduce第七講合表（Join操作）通俗的講就是把兩個文件的內容合到一塊。話不多說，我直接上案列一、準備兩個數據文件： data.txt： 201001 1003 abc 201002 1005 def 2010

2020-06-23 10:17:12

CentOS下安裝僞分佈式HBase

文章目錄本文使用安裝包的版本JDK安裝SSH免密登錄配置Hadoop安裝HBase安裝配置自己的zookeeper配置phoenix 本文針對沒有JDK和Hadoop的情況下的安裝，如果已經配置好了JDK環境和Hadoop環境的可

每天都有新收获

2020-06-22 09:22:45

YARN設計思路（hadoop1.0與hadoop2.x）

少年阿峣_从零单排

2020-06-22 02:27:39

安裝Linux以及搭建Hadoop3.1.2集羣（9）——集羣時間同步(完成）

第十章：集羣時間同步時間同步的方式：找一個機器，作爲時間服務器，所有的機器與這臺集羣時間進行定時的同步，比如，每隔十分鐘，同步一次時間。配置時間同步具體實操：時間服務器配置（必須root用戶）（1）檢查ntp是否安裝

2020-06-19 09:49:17

24小時熱門文章

最新文章

最新評論文章