原创 Linux環境下安裝Elasticsearch
Linux環境下安裝Elasticsearch（因爲Elasticsearch需要jdk1.8或更高的版本纔可以運行）提前下載tar.gz相關文件，下載地址:https://www.elastic.co/downloads/elastic
2020-07-05 20:19:11
原创 關於克隆後的虛擬機網卡的問題
centos 6.7查看ifconfig 發現沒有網卡然後設置： ifconfig eth1 up查看ifconfig 得到mac地址修改文件 /etc/systemconfig/network-scripts/ifcfg-eth0改名爲
2020-02-20 14:21:46
原创 Spark集羣安裝
3.1 下載 spark 安裝包下載地址 spark 官網： http://spark.apache.org/downloads.html這裏我們使用
2020-02-20 14:21:46
原创 linux常見文件設置-ssh-主機名-域名映射-防火牆等
同步時間#手動同步集羣各機器時間date -s "2017-03-03 03:03:03" yum install ntpdate#網絡同步時間ntpdate cn.pool.ntp.org 設置主機名vi /etc/sysconfig
2020-02-20 14:21:46
原创 離線redis的安裝
離線redis的安裝Redis是c語言開發的。安裝redis需要c語言的編譯環境。如果沒有gcc需要在線安裝，Yum install gcc-c++如果無法上網，參考離線安裝gcc安裝步驟：第一步：redis的源碼包上傳到linux系統。
2020-02-20 14:21:46
原创 Storm集羣搭建
Storm集羣安裝部署cd /export/servers/software/tar -zxvf apache-storm-1.1.1.tar.gz
2020-02-20 14:21:46
原创 Flume安裝部署
一、 Flume安裝部署l Flume的安裝非常簡單上傳安裝包到數據源所在節點上然後解壓 tar -zxvf apache-flume-1.6.0-bin.tar.gz然後進入flume的目錄，修改conf下的flume-env.sh，
2020-02-20 14:21:46
原创 Hbase集羣部署
### 2.1 下載安裝包```wget http://mirrors.hust.edu.cn/apache/hbase/1.3.1/hbase-1.3.1-bin.tar.gztar -zxvf hbase-1.3.1-bin.tar.
2020-02-20 14:21:44
原创 ES插件es-head安裝
安裝Head 插件Elasticsearch Head Plugin: 對ES進行各種操作，如查詢、刪除、瀏覽索引等。1、下載elasticsear
2020-02-20 14:21:44
原创 hive安裝部署
1.上傳tar包 2.解壓 tar -zxvf hive-1.2.1.tar.gz 3.安裝mysql數據庫 推薦yum 在線安裝 4.配置hive （a）配置HIVE_HOME環境變量
2020-02-20 14:21:44
原创 linux上安裝jdk
查看當前的jdk版本java –version 查找有哪些Java的包rpm -qa | grep java 依次卸載openjdk的包rpm -e --nodeps tzdata-java-2015e-1.el6.noarchrpm -
2020-02-20 14:21:44
原创 hadoop ha的集羣搭建
1.修改Linux主機名2.修改IP3.修改主機名和IP的映射關係 /etc/hosts ---------注意--------- 如果你們公司是租用的服務器或是使用的雲主機（如華爲用主機、阿里雲主機等） /etc/hosts裏面要配置的
2020-02-20 14:21:43
原创 關於簡單介紹Mapreduce,Hbase,Kafka,Zookeeper
1.1. zookeeper是幹什麼的？Zookeeper 是 分佈式協調服務，分佈式應用程序可以基於它實現同步服務，配置維護和命名服務等1.2. zookeeper節點類型Znode有兩種類型：短暫（ephemeral）（斷開連接自己刪
2018-09-03 14:54:23
原创 大數據Hive 面試以及知識點
Hive的工作原理流程大致步驟爲：1. 用戶提交查詢等任務給Driver。2. 編譯器獲得該用戶的任務Plan。3. 編譯器Compiler根據用戶任務去MetaStore中獲取需要的Hive的元數據信息。4. 編譯器Compiler得到
2018-09-03 14:54:23
2