原创 大數據之二:ZOOKEEPER安裝

ZOOKEEPER安裝-僞分佈式 1.先解壓,並重命名 tar zxvf zookeeper-3.4.5-cdh5.14.2.tar.gz mv zookeeper-3.4.5-cdh5.14.2 /opt/bigdata/zk345 2

原创 大數據之三:HBASE安裝

HBASE安裝-僞分佈式 1.先解壓,並重命名 tar zxvf hbase-1.2.0-cdh5.14.2.tar.gz mv hbase-1.2.0-cdh5.14.2 /opt/bigdata/hbase120 2.配置 hbase-

原创 LINUX數據庫----關於數據清洗

LINUX數據庫----關於數據清洗 一、修改數據庫編碼 1.先登錄數據庫 mysql -uroot -proot 2.查看數據庫編碼 發現數據庫和數據庫服務對應的編碼是latin1,需要修改數據庫的編碼爲UTF8 show VARIA

原创 大數據之五:ELK安裝

大數據開發卷五 ​ ---Elasticsearch 分佈式安裝步驟 考慮需要安裝elasticsearch-head作爲web展示 所以首先安裝nodejs 主要是利用npm wget https://npm

原创 Linux配置Maven

Linux配置maven 一.解壓maven 1.1先解壓maven包 tar zxvf apache-maven-3.5.4-bin.tar.gz -C /opt/inst 1.2.重命名解壓後的文件 cd opt/inst mv ap

原创 安裝logstash-input-jdbc插件

安裝logstash-input-jdbc插件,實現數據的插入 1.安裝gem yum install gem -y 2.替換ruby庫(兩種國內源+淘寶源) 2.1.1替換爲國內源 gem sources --add https://g

原创 大數據之一:Hadoop安裝

一、安裝Hadoop 1.先解壓hadoop到相關的文件夾中 2.進入到解壓好的文件夾以後,對相關文件進行修改 3.配置hadoop-env.sh vi hadoop-env.sh: export= JAVA_HOME=/opt/in

原创 JAVA——集合理解

集合複習 一.集合就像一種容器,可以動態的把多個對象的引用 放入到容器中,存儲多個數據 。 集合數組都是對多個數據進行存儲操作的結構,簡稱java容器 二、集合框架、 collection接口:單列集合,用來存儲一個一個對象 ​

原创 大數據之四:Hive安裝

Hive 安裝步驟: JAVA實現讀取文件 但是使用hive會更簡單 hive能夠把文件變成表,只保存表結構存在數據庫mysql中,但是數據還是在文件中 文件----->database---->table ​ ----->