Hadoop 文檔官方版本(0)

目前:大家玩大數據一般都是從 cdh 或 hdp 開始玩的,從集成環境好處多多,但是真正要掌握集羣環境。手動整一把是必須的。

本欄將從hadoop 的官方文檔開始爲大家剖析hadoop ,及一個hadoop 平臺管理員應該掌握什麼東西做一一解析。

hadoop 的官方文檔主要包括以下內容:
總覽
-----------------------------------------------------------------------
單節點設置
集羣設置
命令參考
文件系統外殼
兼容性要求
下游開發人員指南
管理員相容性指南
接口分類
文件系統規範
------------------------------------------------------------------------
共性內容
-------------------------------------------------------------------------
 CLI cluster功能可以使用一個命令直接啓動一個包含yarn/mapreduce和hdfs的hadoop集羣,避免了配置環境變量和配置文件。
本地庫
代理用戶
機架的設置
安全模式
服務水平授權
http認證
任證提供證api 
hadoop kms 認證
追蹤
命令行
----------------------------------------------------------------------------
HDFS
----------------------------------------------------------------------------
架構
用戶指南
命令參考
具有QJM的NameNode HA
具有NFS的NameNode HA
聯邦
視場
快照
編輯查看器
圖像瀏覽器
權限和HDFS
配額和HDFS
libhdfs(C API)
WebHDFS(REST API)
HttpFS
短路本地讀取
集中式緩存管理
NFS網關
滾動升級
擴展屬性
透明加密
多宿主
儲存政策
內存存儲支持
綜合負載發生器
刪除編碼
磁盤平衡器
升級域
數據節點管理員
路由器聯盟
提供的存儲
---------------------------------------------------------------------------
Mapreduce 
---------------------------------------------------------------------------
講解
命令參考
與1.x的兼容性
加密隨機播放
可插拔隨機播放/排序
分佈式緩存部署
支持YARN共享緩存
----------------------------------------------------------------------------
MapReduce REST API
MR應用大師
MR歷史記錄服務器
-----------------------------------------------------------------------------
YARN
------------------------------------------------------------------------------
建築
命令參考
容量調度器
公平調度
重新啓動ResourceManager
資源管理器HA
資源模型
節點標籤
節點屬性
Web應用程序代理
時間軸服務器
時間軸服務V.2
編寫YARN應用程序
YARN應用程序安全
節點管理器
在Docker容器中運行應用程序
使用CGroups
安全容器
登記處
預約系統
優雅退役
機會容器
紗聯合會
共享緩存
使用GPU
使用FPGA
放置約束
紗UI2
紗線REST API
------------------------------------------------------------------------------
介紹
資源經理
節點管理器
時間軸服務器
時間軸服務V.2
--------------------------------------------------------------------------------
yarn 
總覽
快速開始
概念
yarn 服務API
服務發現
系統服務
 社區啓動了 Submarine 項目以及其他改進,例如一流的 GPU 支持,Docker 容器支持,容器 DNS 支持,調度改進等。
---------------------------------------------------------------------------------
指數
快速開始
例子
-----------------------------------------------------------------------------------
Hadoop兼容文件系統
------------------------------------------------------------------------------------
Aliyun OSS
Amazon S3
Azure Blob Storage
Azure Data Lake Storage
OpenStack Swift
-------------------------------------------------------------------------------------
Tools
Hadoop Streaming
Hadoop Archives
Hadoop Archive Logs
DistCp
GridMix
Rumen
Resource Estimator Service
Scheduler Load Simulator
Hadoop Benchmarking
----------------------------------------------------------------------------------------
參考
變更日誌和發行說明
Java API文檔
Unix Shell API
指標
----------------------------------------------------------------------------------------
hadoop 的
----------------------------------------------------------------------------------------
core-default.xml
hdfs-default.xml
hdfs-rbf-default.xml
mapred-default.xml
yarn-default.xml
Deprecated Properties   ---不推薦的配置
Deprecated Properties

--------------------------------------------------------------------------------------

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章