原创 springCloud(3)---創建服務提供者Eureka Client

當服務提供者Eureka-client向服務註冊中心Eureka-server註冊時,它會提供一些元數據(如主機和端口、url、主頁等) eurekaServer註冊中心從每個服務提供者實例接收心跳信息,如果心跳超時,則通常將該實例從註冊

原创 單點登錄CAS(1)---概述以及環境搭建

1、什麼是單點登錄? 單點登錄(single sign on),簡稱爲SSO,是目前比較流行的企業業務整合的解決方案之一。 sso:即在多個應用系統中,用戶只需要登錄一次就可以訪問所有相互信任的應用系統。 我們目前的系統中存在諸多子系統,

原创 hadoop(1)---前世今生

首先說一下谷歌的搜索引擎,主要做兩件事情: 第一、通過網絡爬蟲去各個網頁上爬取數據,爬取完數據後需要找個位置存儲。 第二、通過索引服務器對爬取的數據進行分析,然後生成索引。通過索引就可以對各個網頁進行檢索查詢 但是搜索引擎是商業版的,這時

原创 hadoop(2)---概述

hadoop是從Nutch搜索引擎項目裏拆分出來的,其中有兩個模塊HDFS(分佈式存儲)、MapReduce(分佈式計算) 1、hadoop項目由四個部分組成 1)、Hadoop Common:爲其它hadoop模塊提供基礎設施 分佈式存

原创 springCloud(7)----zuul

zuul的主要功能有2大類,一類是路由轉發,一類是過濾器。 路由功能是微服務的一部分,比如/api/user轉發到user服務,/api/goods轉發到goods服務。 zuul默認和Ribbon結合實現了負載功能。 1、zuul實現路

原创 hdfs設計思想

hadoop分爲四大模塊,分別爲:common、hdfs、yarn、mapreduce 什麼是HDFS? hdfs是一個分佈式文件系統。 hdfs設計思想? 設計思想採用的是“分而治之”,分就是當一個文件過大時,一臺計算機存儲不了,就採用

原创 mapReduce入門示例2---手機用戶上行、下行、總流量數據分析統計

需要分析統計的數據: 13726230503 00-FD-07-A4-72-B8:CMCC 120.196.100.82 i02.c.aliimg.com 24 27 2481 246

原创 CAS(2)---服務端配置

1、端口修改 如果我們不希望用8080端口去訪問CAS,可以修改端口,我們這裏不作修改   2、修改CAS配置文件 修改cas的WEB-INF/cas.properties,修改內容如下: server.name=http://loc

原创 solr環境搭建

第一步、官網下載solr-5.5.0.zip,下載後解壓,如下: 第二步、將solr-5.5.0/server/solr-webapp下的webapp,複製到tomcat下的webapps目錄下,並改名爲solr 第三步、將solr-5

原创 hadoop(3)---HDFS分佈式文件系統

HDFS(Hadoop Distributed File System):分佈式文件系統 HDFS的優缺點如下: 優點: 1)、高容錯性:數據自動保存爲多個副本,可以動態的增加副本數,提高容錯性。                    

原创 hadoop2.9.1之集羣搭建(單機)

第一步、下載hadoop到本地 下載地址:http://hadoop.apache.org/releases.html 下載後,如下: 下載完成後,通過WinScp將其上傳到linux中的/usr/local/hadoop目錄下  

原创 linux在線安裝zookeeper

第一步、創建zookeeper的安裝目錄 mkdir -p /usr/local/services/zookeeper 第二步、進入zookeeper目錄 cd /usr/local/services/zookeeper 第三步、下載

原创 linux在線安裝nginx

1、nginx默認佔用80端口,因此安裝時需要查看你的服務器80端口是否被別的程序佔用 瀏覽器訪問的時候不加端口號也是80端口,這樣直接輸入域名或者ip就可以直接訪問到服務器80所指向的服務了。 檢查80端口是否被佔用,執行如下命令:ne

原创 linux在線安裝JDK1.8

第一步、遠程連接Xshell後,切換到root用戶(使用su命令切換到root用戶) 第二步、使用cd命令切換到/usr目錄(/usr目錄:用戶的很多應用程序和文件都放在這個目錄下面,類似於windows下的program files目

原创 集羣(1)---集羣的概念

1、什麼是集羣? 將同一個業務部署在多臺服務器上,如果主機宕機了,其它服務器可以自動接替主機服務器工作,以實現持續性爲客戶提供服務,並且處理科研實驗以及核處理等大型計算業務,單臺大型計算機依然無法勝任,集羣可以將一個計算業務交給集羣中的多