原创 Java mongodb System.js 應用

近期遇到了一個比較麻煩的查詢,就想用mongodb system.js實現,有點類似關係型數據庫的存儲過程的味道。 system.js是每個數據庫都會有的一個特殊集合,用來存放js的變量,可以在db.eval,mapreduce,wher

原创 haproxy + keepalived 實現簡單負載均衡高可靠

ip addr add 192.168.50.50/24 dev etho   添加輔助ip   ip addr del 192.168.50.50/24 dev etho   刪除輔助ip   腦裂:某種原因導致集羣各節

原创 UNIX 讀書筆記01

標準輸出流默認不能隨着管道流下,可以使用如下腳本: ls n* 2> errors    2> 代表標準錯誤流的處理方式跟隨標準輸出流保持一致 vim: 1,$s/^/愛/  給從第一行開始每行行頭加上”愛“ 15,$s/

原创 hadoop-wordcount demo

package com.billstudy.hdfs; import java.io.IOException; import org.apache.hadoop.conf.Configuration; import org.apach

原创 eclipse develop hadoop chmod :Cannot run program "chmod": CreateProcess error=2, ?????????

在window eclipse上測試hadoop 程序時,出現不能執行chmod問題。  需要安裝cygwin程序:點擊下載x64 cygwin 具體安裝步驟,網上很多文章有介紹了。  錯誤如下:15/04/19 14:41:29 IN

原创 NFS安裝和配置

------------------------------------------------------------------------------------------------------------------NFS就

原创 spark 1.3.1 master 源碼初探01

首先打開遠程調試:     1.在spark/conf/spark-env.xml裏面加入下列代碼允許master遠程調試            export SPARK_MASTER_OPTS="-Xdebug -Xru

原创 Vmware qemu-kvm 虛擬化測試

[root@kvm1 cloud]# lsmod | grep kvm kvm_intel 55496 3 kvm 337772 1 kvm_intel [root@kv

原创 StormDRPC 概念以及簡單例子測試

Storm裏面引入DRPC主要是利用storm的實時計算能力來並行化CPU intensive的計算。DRPC的storm topology以函數的參數流作爲輸入,而把這些函數調用的返回值作爲topology的輸出流。   DRPC其實不

原创 Linux bridge-utils tunctl 使用

網絡 brctl是Linux下用來管理以太網橋,在內核中建立、維護、檢查網橋配置的命令 STP - Spanning Tree Protocol(生成樹協議)邏輯上斷開環路,防止二層網絡的廣播風暴的產生 以dhcp模式啓用 'eth0'

原创 Unable to create a deployment for VM[User|i-2-6-VM]

錯誤:Unable to create a deployment for VM[User|i-2-6-VM] cloudstack添加實例時,host內存給小了。原來是4G,給它8G再添加就好了。 

原创 Zookeeper實現服務上下線監控服務列表

package com.billstudy.zookeeper; import java.util.ArrayList; import java.util.List; import java.util.concurrent.TimeUn

原创 Lvs + Ngnix + Haproxy + Keepalived + Tomcat 實現三種HA軟負載均衡和Tomcat Session共享

環境準備: 一、11臺測試機器     hostname:v1 ~ v10   (10臺測試機)     ip:192.168.33.81(v1) ~ 192.168.33.90(v101)     由於在內網測試,需要搭建個內網y

原创 02-Reference & GC

一、引用     Java中引用的定義很傳統:如果reference類型的數據中存儲的數值代表的是另外一塊內存的起始地址,就稱這塊內存代表着一個引用。這個定義很純粹,但是太過狹隘,一個對象在這種定義下只有被引用或者沒有被引用兩種狀態,對

原创 ZooKeeper典型應用場景一覽

ZooKeeper是一個高可用的分佈式數據管理與系統協調框架。基於對Paxos算法的實現,使該框架保證了分佈式環境中數據的強一致性,也正是基於這樣的特性,使得ZooKeeper解決很多分佈式問題。網上對ZK的應用場景也有不少介紹,本文將結