原创 Linux eclipse安裝hadoop插件
準備:eclipse安裝包:eclipse-SDK-4.3.1-linux-gtk-x86_64.tar.gz hadoop插件:hadoop-eclipse-plugin-2.5.0.jar (可以到網上下載,也
原创 Keepalived實現Redis Failover自動故障切換
Keepalived實現Redis Failover自動故障切換 參考資料: http://patrick-tang.blogspot.com/2012/06/redis-keepalived-failover-system.html
原创 Storm原理詳解
轉自:http://blog.itpub.net/29754888/viewspace-1260026/ Storm是一個分佈式的、高容錯的實時計算系統。 Storm對於實時計算的的意義相當於Hadoop對於批處理的意義。Hadoop爲
原创 Linux apache tomcat 集羣搭建
Apache tomcat 集羣搭建 準備: OS:rhel-server-5.4-x86_64-dvd.iso JDK: jdk-7u71-linux-x64.tar.gz Apache:httpd-2.4.10.tar.
原创 基於flume+kafka+storm日誌收集系統搭建
基於flume+kafka+storm日誌收集系統搭建 1. 環境 192.168.0.2 hadoop1 192.168.0.3 hadoop2 192.168.0.4 hadoop3 已經安裝了jdk1.7並配置了環境變量 2
原创 hadoop-2.5.0,hbase,hive,pig,sqoop,zookeeper 集羣安裝
1. 準備工作 軟件準備: 1) Hadoop: hadoop-2.5.0.tar.gz 2) Jdk: jdk-7u71-linux-x64.tar.gz 3) Hive:apache
原创 HTTP 長連接與短連接
1. HTTP協議與TCP/IP協議的關係 HTTP的長連接和短連接本質上是TCP長連接和短連接。HTTP屬於應用層協議,在傳輸層使用TCP協議,在網絡層使用IP協議。IP協議主要解決網絡路由和尋址問題,TCP協議主要解決如何在I
原创 Linux mysql安裝
mkdir–p /home/tools 將MySQL-server-5.5.21-1.linux2.6.x86_64.rpm,MySQL-client-5.5.21-1.linux2.6.x86_64.rpm 複製到/home/tools
原创 Spark基於zookeeper的HA
Spark基於zookeeper的HA 1. 準備 Zookeeper環境 參考:http://blog.csdn.net/mapengbo521521/article/details/41777721 Spark環境 參考:htt
原创 Strom集羣搭建
Strom集羣搭建1. 準備Jdk strom的部分代碼用java編寫,需要依賴jdk,我用的是1.7Python storm依賴python,如果系統自帶的python爲2.6以下版本需要升級,可以直接在終端輸入:python查看系
原创 Memcache 入門
Memcached概念: Memcached是一個免費開源的,高性能的,具有分佈式對象的緩存系統,它可以用來保存一些經常存取的對象或數據,保存的數據像一張巨大的HASH表,該表以Key-value對的方式存在內存中。 官網下載地址:
原创 flume 收集日誌到HDFS
作者同類文章X 轉自:http://www.aboutyun.com/thread-7949-1-1.html 問題導讀:1.什麼是flume?2.如何安裝flume? 3.flume的配置文件與其它軟件有什麼不同?一、認識flume1.
原创 Mahout安裝與配置
Mahout安裝與配置 1:環境: 需要安裝hadoop 我安裝的是Hadoop2.5 Hadoop安裝參考:http://blog.csdn.net/mapengbo521521/article/details/41777721 下載地
原创 netstat命令怎麼查看端口是否佔用
轉自:http://www.ahlinux.com/start/cmd/527.html netstat命令是一個監控TCP IP網絡的非常有用的工具,它可以顯示路由表、實際的網絡連接以及每一個網絡接口設備的狀態信息,這裏我只用到其 ne
原创 系統負載是什麼
一、系統負載 轉自:http://www.ruanyifeng.com/blog/2011/07/linux_load_average_explained.html 1. 如何查看負載 在Linux系統中,使用uptime命令