原创 ElasticSearch多節點模式的搭建

環境準備:環境CentOS7安裝了JDK1.8這裏用的elasticsearch5.2.2爲例,你也可以用5.6.1或者更高的版本參考之前的單節點模式https://blog.51cto.com/6989066/2334006 (1)先確認

原创 電商大數據項目-推薦系統實戰(一)

電商大數據項目-推薦系統實戰(一)環境搭建以及日誌,人口,商品分析https://blog.51cto.com/6989066/2325073電商大數據項目-推薦系統實戰之推薦算法https://blog.51cto.com/6989066

原创 大數據之搭建HDP環境,以三個節點爲例(上——部署主節點以及服務)

(一)實驗環境l 實驗介質CentOS-7-x86_64-Everything-1708.isojdk-8u144-linux-x64.tar.gzambari-2.6.0.0-centos7.tar.gzHDP-2.6.3.0-c

原创 Elasticsearch集羣搭建1Welcome to my ELK world!

轉載自:https://blog.51cto.com/13120271/2308902 系統環境: jdk1.8環境ubuntu16.04系統 172.20.1.10 node-1ubuntu16.04系統 172.20.1.20 node

原创 解決cannot be read or is not a valid ZIP file問題

Eclipse新建Maven工程,通過配置Maven的pom.xml文件下載hdfs相關jar包,結果報以下的錯誤 Description Resource Path Location TypeArchive for re

原创 ElasticSearch單節點模式的搭建

環境CentOS7安裝了JDK1.8這裏用的elasticsearch5.2.2爲例,你也可以用5.6.1或者更高的版本 1.最好以非root用戶解壓ElasticSearch,如果用root用戶,要不然以後還要將文件的權限以及組轉移給非f

原创 Eclipse中Maven工程如何添加scala object

剛寫了一篇博客,發了點牢騷,被刪除了。這次就簡單點。 參考版本:Eclipse oxygen 4.7版本1.新建maven project ,File->new->Maven peoject 2.選中project右鍵->new->scal

原创 電商大數據項目(二)-推薦系統實戰之實時分析以及離線分析

電商大數據項目-推薦系統實戰(一)環境搭建以及日誌,人口,商品分析http://blog.51cto.com/6989066/2325073電商大數據項目-推薦系統實戰之推薦算法http://blog.51cto.com/6989066/2

原创 電商大數據項目-推薦系統實戰之推薦算法(三)

電商大數據項目-推薦系統實戰(一)環境搭建以及日誌,人口,商品分析http://blog.51cto.com/6989066/2325073電商大數據項目-推薦系統實戰之推薦算法http://blog.51cto.com/6989066/2

原创 大數據基礎之如何導出jar包並放在hdfs上執行

我口才不好,文字描述也不行,但是基本邏輯是通的。 導出jar包1.首先完成mapper和reducer還有main方法的編碼2。右鍵點擊peopleinfo的包,選擇export-》Java-》JAR file,點擊NEXT3.輸入jar包

原创 電商大數據項目-推薦系統實戰

開源項目,請勿用於任何商業用途。源代碼地址:https://github.com/asdud/Bigdata_project 本項目是基於Spark MLLib的大數據電商推薦系統項目,使用了scala語言和java語言。基於python語

原创 如何獲得阿里雲大學Clouder認證?

作者:阿里雲大學鏈接:https://www.zhihu.com/question/67432407/answer/252717602來源:知乎著作權歸作者所有。商業轉載請聯繫作者獲得授權,非商業轉載請註明出處。 Apsara Cloude

原创 搭建CDH實驗環境,以三個節點爲例的安裝配置

(一)實驗環境l 實驗介質n CentOS-7-x86_64-Everything-1708.ison jdk-8u161-linux-x64.rpmn cloudera-manager-centos7-cm5.12.1_x86_64.ta

原创 大數據之搭建HDP環境,以三個節點爲例(下——擴展節點,刪除節點,以及部署其他服務)

部署主節點以及安裝服務請看上http://blog.51cto.com/6989066/2173573 (八)節點的擴展(以HDFS爲例)① 從節點的準備工作安裝一臺新的Linux從節點只需要安裝l Server With GUIl De

原创 大數據之搭建HDP環境,以三個節點爲例

(一)實驗環境l 實驗介質CentOS-7-x86_64-Everything-1708.isojdk-8u144-linux-x64.tar.gzambari-2.6.0.0-centos7.tar.gzHDP-2.6.3.0-c