原创 Java mongodb System.js 應用
近期遇到了一個比較麻煩的查詢,就想用mongodb system.js實現,有點類似關係型數據庫的存儲過程的味道。 system.js是每個數據庫都會有的一個特殊集合,用來存放js的變量,可以在db.eval,mapreduce,wher
原创 haproxy + keepalived 實現簡單負載均衡高可靠
ip addr add 192.168.50.50/24 dev etho 添加輔助ip ip addr del 192.168.50.50/24 dev etho 刪除輔助ip 腦裂:某種原因導致集羣各節
原创 UNIX 讀書筆記01
標準輸出流默認不能隨着管道流下,可以使用如下腳本: ls n* 2> errors 2> 代表標準錯誤流的處理方式跟隨標準輸出流保持一致 vim: 1,$s/^/愛/ 給從第一行開始每行行頭加上”愛“ 15,$s/
原创 hadoop-wordcount demo
package com.billstudy.hdfs; import java.io.IOException; import org.apache.hadoop.conf.Configuration; import org.apach
原创 eclipse develop hadoop chmod :Cannot run program "chmod": CreateProcess error=2, ?????????
在window eclipse上測試hadoop 程序時,出現不能執行chmod問題。 需要安裝cygwin程序:點擊下載x64 cygwin 具體安裝步驟,網上很多文章有介紹了。 錯誤如下:15/04/19 14:41:29 IN
原创 NFS安裝和配置
------------------------------------------------------------------------------------------------------------------NFS就
原创 spark 1.3.1 master 源碼初探01
首先打開遠程調試: 1.在spark/conf/spark-env.xml裏面加入下列代碼允許master遠程調試 export SPARK_MASTER_OPTS="-Xdebug -Xru
原创 Vmware qemu-kvm 虛擬化測試
[root@kvm1 cloud]# lsmod | grep kvm kvm_intel 55496 3 kvm 337772 1 kvm_intel [root@kv
原创 StormDRPC 概念以及簡單例子測試
Storm裏面引入DRPC主要是利用storm的實時計算能力來並行化CPU intensive的計算。DRPC的storm topology以函數的參數流作爲輸入,而把這些函數調用的返回值作爲topology的輸出流。 DRPC其實不
原创 Linux bridge-utils tunctl 使用
網絡 brctl是Linux下用來管理以太網橋,在內核中建立、維護、檢查網橋配置的命令 STP - Spanning Tree Protocol(生成樹協議)邏輯上斷開環路,防止二層網絡的廣播風暴的產生 以dhcp模式啓用 'eth0'
原创 Unable to create a deployment for VM[User|i-2-6-VM]
錯誤:Unable to create a deployment for VM[User|i-2-6-VM] cloudstack添加實例時,host內存給小了。原來是4G,給它8G再添加就好了。
原创 Zookeeper實現服務上下線監控服務列表
package com.billstudy.zookeeper; import java.util.ArrayList; import java.util.List; import java.util.concurrent.TimeUn
原创 Lvs + Ngnix + Haproxy + Keepalived + Tomcat 實現三種HA軟負載均衡和Tomcat Session共享
環境準備: 一、11臺測試機器 hostname:v1 ~ v10 (10臺測試機) ip:192.168.33.81(v1) ~ 192.168.33.90(v101) 由於在內網測試,需要搭建個內網y
原创 02-Reference & GC
一、引用 Java中引用的定義很傳統:如果reference類型的數據中存儲的數值代表的是另外一塊內存的起始地址,就稱這塊內存代表着一個引用。這個定義很純粹,但是太過狹隘,一個對象在這種定義下只有被引用或者沒有被引用兩種狀態,對
原创 ZooKeeper典型應用場景一覽
ZooKeeper是一個高可用的分佈式數據管理與系統協調框架。基於對Paxos算法的實現,使該框架保證了分佈式環境中數據的強一致性,也正是基於這樣的特性,使得ZooKeeper解決很多分佈式問題。網上對ZK的應用場景也有不少介紹,本文將結