原创 Linux eclipse安裝hadoop插件

準備:eclipse安裝包:eclipse-SDK-4.3.1-linux-gtk-x86_64.tar.gz             hadoop插件:hadoop-eclipse-plugin-2.5.0.jar (可以到網上下載,也

原创 Keepalived實現Redis Failover自動故障切換

Keepalived實現Redis Failover自動故障切換   參考資料: http://patrick-tang.blogspot.com/2012/06/redis-keepalived-failover-system.html

原创 Storm原理詳解

轉自:http://blog.itpub.net/29754888/viewspace-1260026/ Storm是一個分佈式的、高容錯的實時計算系統。 Storm對於實時計算的的意義相當於Hadoop對於批處理的意義。Hadoop爲

原创 Linux apache tomcat 集羣搭建

Apache tomcat 集羣搭建   準備: OS:rhel-server-5.4-x86_64-dvd.iso JDK:  jdk-7u71-linux-x64.tar.gz Apache:httpd-2.4.10.tar.

原创 基於flume+kafka+storm日誌收集系統搭建

基於flume+kafka+storm日誌收集系統搭建 1.     環境 192.168.0.2 hadoop1 192.168.0.3 hadoop2 192.168.0.4 hadoop3 已經安裝了jdk1.7並配置了環境變量 2

原创 hadoop-2.5.0,hbase,hive,pig,sqoop,zookeeper 集羣安裝

  1.        準備工作 軟件準備:   1)      Hadoop: hadoop-2.5.0.tar.gz 2)      Jdk: jdk-7u71-linux-x64.tar.gz 3)      Hive:apache

原创 HTTP 長連接與短連接

1. HTTP協議與TCP/IP協議的關係   HTTP的長連接和短連接本質上是TCP長連接和短連接。HTTP屬於應用層協議,在傳輸層使用TCP協議,在網絡層使用IP協議。IP協議主要解決網絡路由和尋址問題,TCP協議主要解決如何在I

原创 Linux mysql安裝

mkdir–p /home/tools 將MySQL-server-5.5.21-1.linux2.6.x86_64.rpm,MySQL-client-5.5.21-1.linux2.6.x86_64.rpm 複製到/home/tools

原创 Spark基於zookeeper的HA

Spark基於zookeeper的HA 1.    準備 Zookeeper環境 參考:http://blog.csdn.net/mapengbo521521/article/details/41777721 Spark環境 參考:htt

原创 Strom集羣搭建

Strom集羣搭建1.  準備Jdk  strom的部分代碼用java編寫,需要依賴jdk,我用的是1.7Python storm依賴python,如果系統自帶的python爲2.6以下版本需要升級,可以直接在終端輸入:python查看系

原创 Memcache 入門

Memcached概念: Memcached是一個免費開源的,高性能的,具有分佈式對象的緩存系統,它可以用來保存一些經常存取的對象或數據,保存的數據像一張巨大的HASH表,該表以Key-value對的方式存在內存中。   官網下載地址:

原创 flume 收集日誌到HDFS

作者同類文章X 轉自:http://www.aboutyun.com/thread-7949-1-1.html 問題導讀:1.什麼是flume?2.如何安裝flume? 3.flume的配置文件與其它軟件有什麼不同?一、認識flume1.

原创 Mahout安裝與配置

Mahout安裝與配置 1:環境: 需要安裝hadoop 我安裝的是Hadoop2.5 Hadoop安裝參考:http://blog.csdn.net/mapengbo521521/article/details/41777721 下載地

原创 netstat命令怎麼查看端口是否佔用

轉自:http://www.ahlinux.com/start/cmd/527.html netstat命令是一個監控TCP IP網絡的非常有用的工具,它可以顯示路由表、實際的網絡連接以及每一個網絡接口設備的狀態信息,這裏我只用到其 ne

原创 系統負載是什麼

一、系統負載 轉自:http://www.ruanyifeng.com/blog/2011/07/linux_load_average_explained.html 1.      如何查看負載 在Linux系統中,使用uptime命令