0470-如何在Redhat7.4安裝CDH5.16.1

原創 Hadoop實操 2018-12-04 12:53

Fayson的github： https://github.com/fayson/cdhproject

推薦關注微信公衆號：“Hadoop實操”，ID：gh_c4c535955d0f，或者掃描文末二維碼。

1.文章編寫目的

Cloudera在2018年11月29日發佈了CDH5.16.1，新功能介紹可以參考Fayson之前的文章《0466-CDH5.16.1和CM5.16.1的新功能》。本文檔主要描述如何在Redhat7.4安裝CDH5.16.1。Cloudera大數據平臺的安裝主要分爲4個步驟：

1.集羣服務器配置，包括安裝操作系統、關閉防火牆、同步服務器時鐘等，又稱爲集羣安裝的前置準備，關於更多前置條件準備也可以參考Fayson之前的的文檔《CDH安裝前置準備》；

2.安裝Cloudera Manager；

3.通過Cloudera Manager的Web UI嚮導式安裝CDH集羣；

4.集羣完整性檢查，包括HDFS文件系統、MapReduce、Hive等是否可以正常運行。

本文操作說明基於以下假設：

1.操作系統版本：Redhat7.4

2.CDH和CM版本均爲5.16.1

3.採用root對集羣進行部署

4.您已經下載CDH和CM的安裝包

2.前置準備

2.1.hostname及hosts配置

集羣中各個節點之間能互相通信使用靜態IP地址。IP地址和主機名通過/etc/hosts配置，主機名通過/etc/hostname進行配置。

以cm節點（172.31.13.38）爲例：

  • hostname配置

/etc/hostname文件如下：

ip-172-31-13-38.ap-southeast-1.compute.internal

或者你可以通過命令修改立即生效

[root@ip-172-31-13-38 ~]$ hostnamectl set-hostname ip-172-31-13-38.ap-southeast-1.compute.internal

<font face="微軟雅黑" size=4 color=red >注意：這裏修改hostname跟REDHAT6的區別

  • hosts配置

/etc/hosts文件如下:

127.0.0.1   localhost localhost.localdomain localhost4 localhost4.localdomain4
::1         localhost localhost.localdomain localhost6 localhost6.localdomain6

172.31.13.38 ip-172-31-13-38.ap-southeast-1.compute.internal
172.31.11.232 ip-172-31-11-232.ap-southeast-1.compute.internal
172.31.11.9 ip-172-31-11-9.ap-southeast-1.compute.internal
172.31.13.166 ip-172-31-13-166.ap-southeast-1.compute.internal

以上兩步操作，在集羣中其它節點做相應配置。確認需要安裝的4臺主機的hosts文件：
在這裏插入圖片描述

2.2.禁用SELinux

在所有節點執行setenforce 0 命令，此處使用批處理shell執行：

[root@ip-172-31-13-38 ~]$ sh ssh_do_all.sh node.list "setenforce 0"

在這裏插入圖片描述

集羣所有節點修改/etc/selinux/config文件如下：

SELINUX=disabled
SELINUXTYPE=targeted

檢查所有機器是否已修改成功：

sh ssh_do_all.sh node.list "cat /etc/selinux/config | grep SELINUX"

在這裏插入圖片描述

2.3.關閉防火牆

集羣所有節點執行systemctl stop firewalld命令，此處通過shell批量執行命令如下：

[root@ip-172-31-13-38 ~]$ sh ssh_do_all.sh node.list "systemctl stop firewalld"
[root@ip-172-31-13-38 ~]$ sh ssh_do_all.sh node.list "systemctl disable firewalld"
[root@ip-172-31-13-38 ~]$ sh ssh_do_all.sh node.list "systemctl status firewalld"

在這裏插入圖片描述

2.4.集羣時鐘同步

在Redhat7.x的操作系統上，已經默認的安裝了chrony，我們這裏先卸載chrony，然後安裝ntp。使用ntp來配置各臺機器的時鐘同步，將cm（172.31.13.38）服務作爲本地ntp服務器，其它3臺服務器與其保持同步。

1.所有機器卸載chrony

[root@ip-172-31-13-38 shell]# sh ssh_do_all.sh node.list "yum -y remove chrony"

在這裏插入圖片描述

在這裏插入圖片描述

2.所有機器安裝ntp

[root@ip-172-31-13-38 shell]# sh ssh_do_all.sh node.list "yum -y install ntp"

在這裏插入圖片描述

3.cm機器配置時鐘與自己同步

[root@ip-172-31-16-68 shell]# vim /etc/ntp.conf
#server 0.rhel.pool.ntp.org iburst
#server 1.rhel.pool.ntp.org iburst
#server 2.rhel.pool.ntp.org iburst
#server 3.rhel.pool.ntp.org iburst
server  127.127.1.0     # local clock
fudge   127.127.1.0 stratum 10

在這裏插入圖片描述

4.集羣其它節點，配置找cm機器去同步

#server 0.rhel.pool.ntp.org iburst
#server 1.rhel.pool.ntp.org iburst
#server 2.rhel.pool.ntp.org iburst
#server 3.rhel.pool.ntp.org iburst
server 172.31.13.38

在這裏插入圖片描述

5.重啓所有機器的ntp服務

[root@ip-172-31-13-38 shell]# sh ssh_do_all.sh node.list "systemctl restart ntpd"
[root@ip-172-31-13-38 shell]# sh ssh_do_all.sh node.list "systemctl status ntpd"
[root@ip-172-31-13-38 shell]# sh ssh_do_all.sh node.list "systemctl enable ntpd"

在這裏插入圖片描述
在這裏插入圖片描述
在這裏插入圖片描述

6.驗證始終同步，在所有節點執行ntpq -p命令，如下使用腳本批量執行

[root@ip-172-31-13-38 shell]# sh ssh_do_all.sh node.list "ntpq -p"

在這裏插入圖片描述

左邊出現*號表示同步成功。

2.5.設置swap

所有節點執行

[root@ip-172-31-13-38 shell]# sh ssh_do_all.sh node.list "echo vm.swappiness = 10 >> /etc/sysctl.conf"
[root@ip-172-31-13-38 shell]# sh ssh_do_all.sh node.list "sysctl vm.swappiness=10"

在這裏插入圖片描述

2.6.設置透明大頁面

所有節點執行：

[root@ip-172-31-13-38 shell]# sh ssh_do_all.sh node.list "echo never > /sys/kernel/mm/transparent_hugepage/defrag "
[root@ip-172-31-13-38 shell]# sh ssh_do_all.sh node.list  "echo never > /sys/kernel/mm/transparent_hugepage/enabled"

在這裏插入圖片描述

設置開機自關閉

將如下腳本添加到/etc/rc.d/rc.local文件中

if test -f /sys/kernel/mm/transparent_hugepage/enabled; then 
 echo never > /sys/kernel/mm/transparent_hugepage/enabled 
fi 
if test -f /sys/kernel/mm/transparent_hugepage/defrag; then 
 echo never > /sys/kernel/mm/transparent_hugepage/defrag 
fi

同步到所有節點
在這裏插入圖片描述
在這裏插入圖片描述

2.7.配置操作系統repo

<font face="微軟雅黑" size=4 color=red >Fayson用的是AWS的環境，這步是可以省略的，放在這裏供物理機部署的兄弟們參考。

  • 掛載操作系統iso文件
[root@ip-172-31-2-159 ~]$ sudo mkdir /media/DVD1
[root@ip-172-31-2-159 ~]$ sudo mount -o loop 
CentOS-7-x86_64-DVD-1611.iso /media/DVD1/

在這裏插入圖片描述

  • 配置操作系統repo
[root@ip-172-31-2-159 ~]$ sudo vim /etc/yum.repos.d/local_os.repo
[local_iso]    
name=CentOS-$releasever - Media
baseurl=file:///media/DVD1
gpgcheck=0
enabled=1
[root@ip-172-31-2-159 ~]$ sudo yum repolist

2.8.安裝http服務

  • 安裝httpd服務
[root@ip-172-31-2-159 ~]$ yum -y install httpd
  • 啓動或停止httpd服務
[root@ip-172-31-2-159 ~]$ systemctl start httpd
[root@ip-172-31-2-159 ~]$ systemctl stop httpd
  • 安裝完httpd後，重新制作操作系統repo，換成http的方式方便其它服務器也可以訪問
[root@ip-172-31-2-159 ~]$ sudo mkdir /var/www/html/iso
[root@ip-172-31-2-159 ~]$ sudo scp -r /media/DVD1/* /var/www/html/iso/
[root@ip-172-31-2-159 ~]$ sudo vim /etc/yum.repos.d/os.repo 
[osrepo]
name=os_repo
baseurl=http://172.31.2.159/iso/
enabled=true
gpgcheck=false
[root@ip-172-31-2-159 ~]$ sudo yum repolist

2.9.安裝MariaDB

1.安裝MariaDB

[root@ip-172-31-13-38 ~]# yum -y install mariadb
[root@ip-172-31-13-38 ~]# yum -y install mariadb-server

在這裏插入圖片描述
在這裏插入圖片描述

2.啓動並配置MariaDB

[root@ip-172-31-13-38 ~]# systemctl start mariadb
[root@ip-172-31-13-38 ~]# systemctl enable mariadb
[root@ip-172-31-13-38 ~]# /usr/bin/mysql_secure_installation

NOTE: RUNNING ALL PARTS OF THIS SCRIPT IS RECOMMENDED FOR ALL MariaDB
      SERVERS IN PRODUCTION USE!  PLEASE READ EACH STEP CAREFULLY!

In order to log into MariaDB to secure it, we'll need the current
password for the root user.  If you've just installed MariaDB, and
you haven't set the root password yet, the password will be blank,
so you should just press enter here.

Enter current password for root (enter for none): 
OK, successfully used password, moving on...

Setting the root password ensures that nobody can log into the MariaDB
root user without the proper authorisation.

Set root password? [Y/n] Y
New password: 
Re-enter new password: 
Password updated successfully!
Reloading privilege tables..
 ... Success!

By default, a MariaDB installation has an anonymous user, allowing anyone
to log into MariaDB without having to have a user account created for
them.  This is intended only for testing, and to make the installation
go a bit smoother.  You should remove them before moving into a
production environment.

Remove anonymous users? [Y/n] Y
 ... Success!

Normally, root should only be allowed to connect from 'localhost'.  This
ensures that someone cannot guess at the root password from the network.

Disallow root login remotely? [Y/n] n
 ... skipping.

By default, MariaDB comes with a database named 'test' that anyone can
access.  This is also intended only for testing, and should be removed
before moving into a production environment.

Remove test database and access to it? [Y/n] Y
 - Dropping test database...
 ... Success!
 - Removing privileges on test database...
 ... Success!

Reloading the privilege tables will ensure that all changes made so far
will take effect immediately.

Reload privilege tables now? [Y/n] Y
 ... Success!

Cleaning up...

All done!  If you've completed all of the above steps, your MariaDB
installation should now be secure.

Thanks for using MariaDB!

在這裏插入圖片描述

3.建立CM，Hive等需要的表

[root@ip-172-31-13-38 ~]# mysql -u root -p
Enter password: 
Welcome to the MariaDB monitor.  Commands end with ; or \g.
Your MariaDB connection id is 9
Server version: 5.5.56-MariaDB MariaDB Server

Copyright (c) 2000, 2017, Oracle, MariaDB Corporation Ab and others.

Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

MariaDB [(none)]> 

create database metastore default character set utf8;  CREATE USER 'hive'@'%' IDENTIFIED BY 'password';   GRANT ALL PRIVILEGES ON metastore. * TO 'hive'@'%';   FLUSH PRIVILEGES;  create database cm default character set utf8;  CREATE USER 'cm'@'%' IDENTIFIED BY 'password';   GRANT ALL PRIVILEGES ON cm. * TO 'cm'@'%';   FLUSH PRIVILEGES;  create database am default character set utf8;   CREATE USER 'am'@'%' IDENTIFIED BY 'password';    GRANT ALL PRIVILEGES ON am. * TO 'am'@'%';    FLUSH PRIVILEGES;      create database rm default character set utf8;   CREATE USER 'rm'@'%' IDENTIFIED BY 'password';    GRANT ALL PRIVILEGES ON rm. * TO 'rm'@'%';    FLUSH PRIVILEGES;

create database hue default character set utf8;   CREATE USER 'hue'@'%' IDENTIFIED BY 'password';    GRANT ALL PRIVILEGES ON hue. * TO 'hue'@'%';    FLUSH PRIVILEGES;

create database oozie default character set utf8;   CREATE USER 'oozie'@'%' IDENTIFIED BY 'password';    GRANT ALL PRIVILEGES ON oozie. * TO 'oozie'@'%';    FLUSH PRIVILEGES;

create database sentry default character set utf8;   CREATE USER 'sentry'@'%' IDENTIFIED BY 'password';    GRANT ALL PRIVILEGES ON sentry. * TO 'sentry'@'%';    FLUSH PRIVILEGES;

create database nav_ms default character set utf8;   CREATE USER 'nav_ms'@'%' IDENTIFIED BY 'password';    GRANT ALL PRIVILEGES ON nav_ms. * TO 'nav_ms'@'%';    FLUSH PRIVILEGES;
create database nav_as default character set utf8;  
CREATE USER 'nav_as'@'%' IDENTIFIED BY 'password';   
GRANT ALL PRIVILEGES ON nav_as. * TO 'nav_as'@'%';   
FLUSH PRIVILEGES;

在這裏插入圖片描述

  • 安裝jdbc驅動
[root@ip-172-31-13-38 ~]# mkdir -p /usr/share/java/
[root@ip-172-31-13-38 ~]# mv mysql-connector-java-5.1.34.jar /usr/share/java/
[root@ip-172-31-13-38 ~]# cd /usr/share/java
[root@ip-172-31-13-38 java]# ln -s mysql-connector-java-5.1.34.jar mysql-connector-java.jar
[root@ip-172-31-13-38 java]# ll
total 940
-rwxrwxr-x. 1 root root 960372 Feb  1 08:31 mysql-connector-java-5.1.34.jar
lrwxrwxrwx  1 root     root         31 Feb  2 00:52 mysql-connector-java.jar -> mysql-connector-java-5.1.34.jar

在這裏插入圖片描述

3.Cloudera Manager安裝

3.1.配置本地repo源

1.下載CM5.16.1的安裝包，地址爲：

http://archive.cloudera.com/cm5/redhat/7/x86_64/cm/5.16.1/RPMS/x86_64/cloudera-manager-agent-5.16.1-1.cm5161.p0.1.el7.x86_64.rpm
http://archive.cloudera.com/cm5/redhat/7/x86_64/cm/5.16.1/RPMS/x86_64/cloudera-manager-daemons-5.16.1-1.cm5161.p0.1.el7.x86_64.rpm
http://archive.cloudera.com/cm5/redhat/7/x86_64/cm/5.16.1/RPMS/x86_64/cloudera-manager-server-5.16.1-1.cm5161.p0.1.el7.x86_64.rpm
http://archive.cloudera.com/cm5/redhat/7/x86_64/cm/5.16.1/RPMS/x86_64/cloudera-manager-server-db-2-5.16.1-1.cm5161.p0.1.el7.x86_64.rpm
http://archive.cloudera.com/cm5/redhat/7/x86_64/cm/5.16.1/RPMS/x86_64/enterprise-debuginfo-5.16.1-1.cm5161.p0.1.el7.x86_64.rpm
http://archive.cloudera.com/cm5/redhat/7/x86_64/cm/5.16.1/RPMS/x86_64/jdk-6u31-linux-amd64.rpm
http://archive.cloudera.com/cm5/redhat/7/x86_64/cm/5.16.1/RPMS/x86_64/oracle-j2sdk1.7-1.7.0+update67-1.x86_64.rpm

在這裏插入圖片描述

2.下載CDH5.16.1的安裝包，地址爲：

http://archive.cloudera.com/cdh5/parcels/5.16.1/CDH-5.16.1-1.cdh5.16.1.p0.3-el7.parcel
http://archive.cloudera.com/cdh5/parcels/5.16.1/CDH-5.16.1-1.cdh5.16.1.p0.3-el7.parcel.sha1
http://archive.cloudera.com/cdh5/parcels/5.16.1/manifest.json

在這裏插入圖片描述

3.將Cloudera Manager安裝需要的7個rpm包下載到本地，放在同一目錄，執行createrepo命令生成rpm元數據。

[root@ip-172-31-13-38 cm5.16.1]# ll
total 1019160
-rw-r--r-- 1 root root   9864584 Nov 27 14:40 cloudera-manager-agent-5.16.1-1.cm5161.p0.1.el7.x86_64.rpm
-rw-r--r-- 1 root root 789872988 Nov 27 14:40 cloudera-manager-daemons-5.16.1-1.cm5161.p0.1.el7.x86_64.rpm
-rw-r--r-- 1 root root      8704 Nov 27 14:40 cloudera-manager-server-5.16.1-1.cm5161.p0.1.el7.x86_64.rpm
-rw-r--r-- 1 root root     10612 Nov 27 14:40 cloudera-manager-server-db-2-5.16.1-1.cm5161.p0.1.el7.x86_64.rpm
-rw-r--r-- 1 root root  30604172 Nov 27 14:40 enterprise-debuginfo-5.16.1-1.cm5161.p0.1.el7.x86_64.rpm
-rw-r--r-- 1 root root  71204325 Nov 27 14:40 jdk-6u31-linux-amd64.rpm
-rw-r--r-- 1 root root 142039186 Nov 27 14:40 oracle-j2sdk1.7-1.7.0+update67-1.x86_64.rpm
[root@ip-172-31-13-38 cm5.16.1]# createrepo .
Spawning worker 0 with 2 pkgs
Spawning worker 1 with 2 pkgs
Spawning worker 2 with 2 pkgs
Spawning worker 3 with 1 pkgs
Workers Finished
Saving Primary metadata
Saving file lists metadata
Saving other metadata
Generating sqlite DBs
Sqlite DBs complete

在這裏插入圖片描述

4.配置Web服務器

將上述cdh5.16.1/cm5.16.1目錄移動到/var/www/html目錄下, 使得用戶可以通過HTTP訪問這些rpm包。

[root@ip-172-31-13-38 ~]# mv cm5.16.1/ cdh5.16.1/ /var/www/html/

在這裏插入圖片描述

驗證瀏覽器能否正常訪問
在這裏插入圖片描述
在這裏插入圖片描述

5.製作Cloudera Manager的repo源

[root@ip-172-31-13-38 ~]# vim /etc/yum.repos.d/cm.repo
[cmrepo]
name = cm_repo
baseurl = http://172.31.13.38/cm5.16.1
enable = true
gpgcheck = false
[root@ip-172-31-13-38 yum.repos.d]# yum repolist
Loaded plugins: amazon-id, rhui-lb, search-disabled-repos
repo id                                          repo name                                  status
cmrepo                                           cm_repo                                         7
rhui-REGION-client-config-server-7/x86_64        Red Hat Update Infrastructure 2.0 Client C      1
rhui-REGION-rhel-server-releases/7Server/x86_64  Red Hat Enterprise Linux Server 7 (RPMs)   20,668
rhui-REGION-rhel-server-rh-common/7Server/x86_64 Red Hat Enterprise Linux Server 7 RH Commo    233
repolist: 20,909

在這裏插入圖片描述

6.驗證安裝JDK

yum -y install oracle-j2sdk1.7-1.7.0+update67-1

在這裏插入圖片描述

3.2.安裝Cloudera Manager Server

1.通過yum安裝Cloudera Manager Server

yum -y install cloudera-manager-server

在這裏插入圖片描述

2.初始化數據庫

[root@ip-172-31-13-38 yum.repos.d]# /usr/share/cmf/schema/scm_prepare_database.sh mysql cm cm password
JAVA_HOME=/usr/java/jdk1.7.0_67-cloudera
Verifying that we can write to /etc/cloudera-scm-server
Creating SCM configuration file in /etc/cloudera-scm-server
Executing:  /usr/java/jdk1.7.0_67-cloudera/bin/java -cp /usr/share/java/mysql-connector-java.jar:/usr/share/java/oracle-connector-java.jar:/usr/share/java/postgresql-connector-java.jar:/usr/share/cmf/schema/../lib/* com.cloudera.enterprise.dbutil.DbCommandExecutor /etc/cloudera-scm-server/db.properties com.cloudera.cmf.db.
[                          main] DbCommandExecutor              INFO  Successfully connected to database.
All done, your SCM database is configured correctly!

在這裏插入圖片描述

3.啓動Cloudera Manager Server

[root@ip-172-31-13-38 ~]# systemctl start cloudera-scm-server

在這裏插入圖片描述

4.檢查端口是否監聽

[root@ip-172-31-13-38 ~]# netstat -lnpt | grep 7180
tcp        0      0 0.0.0.0:7180            0.0.0.0:*               LISTEN      3331/java

在這裏插入圖片描述

5.通過http://13.250.14.115:7180/cmf/login訪問CM
在這裏插入圖片描述

4.CDH安裝

4.1.CDH集羣安裝嚮導

1.admin/admin登錄到CM

2.同意license協議，點擊繼續
在這裏插入圖片描述

3.選擇60試用，點擊繼續
在這裏插入圖片描述

4.點擊“繼續”
在這裏插入圖片描述

5.輸入主機ip或者名稱，點擊搜索找到主機後點擊繼續
在這裏插入圖片描述
在這裏插入圖片描述

6.點擊“繼續”
在這裏插入圖片描述

注意這裏列出來的CDH版本都是系統最開始默認的，來自於Cloudera公網的下載源倉庫，這裏我們需要先將CDH的安裝源修改一下。

7.使用parcel選擇，點擊“更多選項”,點擊“-”刪除其它所有地址，輸入

http://172.31.13.38/cdh5.16.1，點擊“保存更改”

在這裏插入圖片描述

保存更改後，這時回到上個頁面會看到我們之前準備好的http的CDH5.16.1的源，如果顯示不出來，可能http源配置有問題，請參考前面步驟仔細進行檢查。
在這裏插入圖片描述

8.選擇自定義存儲庫，輸入cm的http地址
在這裏插入圖片描述

9.點擊“繼續”，進入下一步安裝jdk
在這裏插入圖片描述

10.點擊“繼續”，進入下一步，默認多用戶模式，不需要進行任何勾選
在這裏插入圖片描述

11.點擊“繼續”，進入下一步配置ssh賬號密碼
在這裏插入圖片描述

12.點擊“繼續”，進入下一步，安裝Cloudera Manager相關到各個節點
在這裏插入圖片描述
在這裏插入圖片描述

13.點擊“繼續”，進入下一步安裝cdh到各個節點
在這裏插入圖片描述

在這裏插入圖片描述

14.點擊“繼續”，進入下一步主機檢查，確保所有檢查項均通過

在這裏插入圖片描述

在這裏插入圖片描述

點擊完成進入服務安裝嚮導。

4.2.集羣設置安裝嚮導

1.選擇需要安裝的服務
在這裏插入圖片描述

2.點擊“繼續”，進入集羣角色分配
在這裏插入圖片描述
在這裏插入圖片描述

3.點擊“繼續”，進入下一步，測試數據庫連接
在這裏插入圖片描述

4.測試成功，點擊“繼續”，進入目錄設置，此處使用默認默認目錄，根據實際情況進行目錄修改
在這裏插入圖片描述

5.點擊“繼續”，進入各個服務啓動
在這裏插入圖片描述

6.安裝成功
在這裏插入圖片描述

7.安裝成功後進入CM管理界面主頁
在這裏插入圖片描述

5.Kudu安裝

CDH從5.13開始，直接打包Kudu，不再需要下載額外的Parcel和csd文件。CDH5.13集成的是Kudu1.5，CDH5.16.1集成的是Kudu1.7。

1.通過CM安裝Kudu1.7

添加Kudu服務
在這裏插入圖片描述

2.選擇Master和Tablet Server
在這裏插入圖片描述

3.配置相應的目錄，注：無論是Master還是Tablet根據實際情況數據目錄(fs_data_dir)應該都可能有多個，以提高併發讀寫，從而提高Kudu性能。
在這裏插入圖片描述

4.啓動Kudu服務
在這裏插入圖片描述

5.安裝完畢
在這裏插入圖片描述

6.配置Impala
在這裏插入圖片描述

回到主頁重啓Impala和Hue
在這裏插入圖片描述

至此，CDH5.16.1+Kudu1.7安裝完畢。

因爲微信單篇文章字數限制，Fayson這裏省略了快速組件驗證章節。你可以參考Fayson以前的文章。

《CENTOS7.2安裝CDH5.10和Kudu1.2(一)》

《CENTOS7.2安裝CDH5.10和Kudu1.2(二)》

《CENTOS6.5安裝CDH5.12.1(一)》

《CENTOS6.5安裝CDH5.12.1(二)》

《CDH安裝前置準備》

《CentOS6.5安裝CDH5.13》

爲天地立心，爲生民立命，爲往聖繼絕學，爲萬世開太平。

推薦關注Hadoop實操，第一時間，分享更多Hadoop乾貨，歡迎轉發和分享。
在這裏插入圖片描述

原創文章，歡迎轉載，轉載請註明：轉載自微信公衆號Hadoop實操

<div align=center><img src="https://img-blog.csdnimg.cn/20181124184403645.png"/></div&gt;

發表評論
所有評論
還沒有人評論，想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章

hadoop一步步入門

lcyuanjiang 2019-02-23 13:59:15

hadoop搭建之hive安裝

伊人心 2019-02-23 00:41:25

（第3篇）HDFS是什麼？HDFS適合做什麼？我們應該怎樣操作HDFS系統？

I加加 2019-02-23 00:38:18

（第2篇）一篇文章教你輕鬆安裝hadoop

I加加 2019-02-23 00:37:53

（第6.1篇）大數據發展背後的強力推手——HBase分佈式存儲系統

I加加 2019-02-23 00:37:53

（第8篇）實時可靠的開源分佈式實時計算系統——Storm

I加加 2019-02-23 00:37:53

（第7篇）靈活易用易維護的hadoop數據倉庫工具——Hive

I加加 2019-02-23 00:37:51

（第4篇）hadoop之魂--mapreduce計算框架，讓收集的數據產生價值

I加加 2019-02-23 00:37:51

（第1篇）什麼是hadoop大數據？我又爲什麼要寫這篇文章？

I加加 2019-02-23 00:37:51

（第9篇）大數據的的超級應用——數據挖掘-推薦系統

I加加 2019-02-23 00:37:50

（第5篇）避免協作衝突--簡單易接入的Zookeeper

I加加 2019-02-23 00:37:50

hadoop 完全分佈式搭建(帶配置文件)

wangyudiwang 2019-02-23 00:37:11

hbase安裝

chengongliang 2019-02-23 00:28:08

hadoop安裝

chengongliang 2019-02-23 00:28:08

基於spark排序的一種更廉價的實現方案-附基於spark的性能測試

wx58a7bb5e188a6 2019-02-23 00:26:45