magent + memcached 集羣測試

首先:配置本地源,掛載光驅,安裝編譯器


Yum install gcc gcc-c++


wget http://monkey.org/~provos/libevent-1.4.9-stable.tar.gz
tar zxvf libevent-1.4.9-stable.tar.gz
cd libevent-1.4.9-stable/
Mkdir /usr/local/libevent
./configure --prefix=/usr/local/libevent
make && make install


2、編譯安裝Memcached:1、編譯安裝libevent:


wget http://danga.com/memcached/dist/memcached-1.2.6.tar.gz
tar zxvf memcached-1.2.6.tar.gz
cd memcached-1.2.6/
Mkdir /usr/local/memcached
./configure --prefix=/usr/local/memcached  --with-libevent=/usr/local/libevent
make && make install


/usr/local/memcached/bin/memcached -m 100 -u root  -d  -l 127.0.0.1  -p 11211


3、啓動memcached服務器:

[如果報錯]

 /usr/local/memcached/bin/memcached: error while loading shared libraries: libevent-1.4.so.2: cannot open shared object file: No such file or directory 


那是你的memcache沒有找到libevent-1.4.so.2 只需要傳建一個軟連接 到memcache找到的地方


ln -s /usr/local/你的libevent安裝位置  /usr/ 要把快捷方式安裝到哪裏 


現在軟連接 已經創建完成



memcached參數詳解:
-p TCP port number to listen on (default: 11211)
-U UDP port number to listen on (default: 0, off)
-s unix socket path to listen on (disables network support)
-a access mask for unix socket, in octal (default 0700)
-l interface to listen on, default is INDRR_ANY
-d run as a daemon
-r maximize core file limit
-u assume identity of (only when run as root)
-m max memory to use for items in megabytes, default is 64 MB
-M return error on memory exhausted (rather than removing items)
-c max simultaneous connections, default is 1024
-k lock down all paged memory. Note that there is a
limit on how much memory you may lock. Trying to
allocate more than that would fail, so be sure you
set the limit correctly for the user you started
the daemon with (not for -u user;
under sh this is done with ‘ulimit -S -l NUM_KB’).
-v verbose (print errors/warnings while in event loop)
-vv very verbose (also print client commands/reponses)
-h print this help and exit
-i print memcached and libevent license
-b run a managed instanced (mnemonic: buckets)
-P save PID in , only used with -d option
-f chunk size growth factor, default 1.25
-n minimum space allocated for key+value+flags, default 48

memcache代理服務器magent安裝配置(192.168.1.246)
1、 magent是一款開源的Memcached代理服務器軟件,其項目網址爲:http://code.google.com/p/memagent/ 目前最新版本爲0.6
2、 安裝,先配置本地源,掛載光驅,安裝編譯器


 Yum install gcc gcc-c++ libgnomeui-devel


wget http://monkey.org/~provos/libevent-1.4.9-stable.tar.gz   //下載安裝libevent
tar zxvf libevent-1.4.9-stable.tar.gz
cd libevent-1.4.9-stable/
Mkdir /usr/local/libevent
./configure
make && make install

4、 安裝magent3、 編譯安裝libevent:


mkdir magent  
cp magent-0.6.tar.gz  ./magent   
cd magent    
tar xzvf ./magent-0.6.tar.gz    
/sbin/ldconfig    
sed -i "s/LIBS = -levent/LIBS = -levent -lm/g" Makefile     
make


繼續makemagent.c:729: 錯誤:‘SSIZE_MAX’未聲明(在此函數內第一次使用)
magent.c:729: 錯誤:(即使在一個函數內多次出現,每個未聲明的標識符在其
magent.c:729: 錯誤:所在的函數內也只報告一次。)
make: *** [magent.o] 錯誤 1
解決方案:
#在ketama.h開頭加入(過濾掉特殊字符)

#ifndef SSIZE_MAX
#define SSIZE_MAX      32767
#endif


cp magent /usr/bin/magent


啓動memagent:

/usr/bin/magent -u root -n 4096 -l 192.168.1.246 -p 12000 -s 192.168.1.247:11211 -s 192.168.1.248:11211  -b 192.168.1.249:11211


magent命令詳解:
-h this message
-u uid
-g gid
-p port, default is 11211. (0 to disable tcp support)
-s ip:port, set memcached server ip and port
-b ip:port, set backup memcached server ip and port
-l ip, local bind ip address, default is 0.0.0.0
-n number, set max connections, default is 4096
-D do not go to background
-k use ketama key allocation algorithm
-f file, unix socket path to listen on. default is off
-i number, max keep alive connections for one memcached server, default is 20
-v verbose

PHP開啓擴展php_memcache.Dll注意版本的問題


//phpinfo();  //查看擴展是否開啓
$mem = new Memcache();
//直接連接代理服務器
$mem->connect('192.168.1.246',12000) or die('connect fail!<br>');
 
echo "connect success!<br>";
 
for($i=0;$i<10;$i++){
    if($mem->set('key'.$i , 'data'.$i , 0 , 3600)){
            echo "set ok!";            
    }else{
            echo "set false!";
    }
}


使用memadmin監控memcached服務器的存儲狀態:報錯提示:
Notice: Memcache::set(): Server 192.168.1.246 (tcp 12000) failed with: Failed reading line from stream (0)
原因是:代理magent沒有連接到memcached服務器

解決方案:
啓動memcached的時候,不能使用 –l 127.0.0.1或者-l localhost,要設置當前IP

備份服務器bak_249請求次數10次,s1_247五次,s2_248五次,memadmin統計信息如下圖:

備份服務器249:
magent_bak

S1_247:
s1

S2_248:
s2

wKioL1VIYarSVRLLAAESqqfnpYQ825.jpg


接着測試magent +memcached的強大功能

 

  環境說明:  centeros 5.4(虛擬機) IP:192.168.128.133

         測試客戶端:win32

    先在133上面開5個memcached端口

    依次執行

memcached -m 1 -u root -d -l 192.168.128.133 -p 10001

memcached -m 1 -u root -d -l 192.168.128.133 -p 10002

memcached -m 1 -u root -d -l 192.168.128.133 -p 10003

memcached -m 1 -u root -d -l 192.168.128.133 -p 10004

memcached -m 1 -u root -d -l 192.168.128.133 -p 10005

  先看看是否啓動監聽端口成功

  ps -ef | grep memcached

  發現結果6行,最後一行是執行這個查看命令的 說明成功

  接着啓動magent 設置啓動參數 -u當然是啓動賬號 -n是最大連接數,-l是magent監聽的IP -p是magent監聽的端口

  後面的格式依次是 -s IP:端口 代表是主服務器 然後指定IP:端口的格式

  -b IP:端口的意思是 備用服務器,

  這裏我設置了10001,10002,10003 爲主Memcached服務器

  10004,10005 爲memcached備份服務器 

 magent -u root -n 51200 -l 192.168.128.133 -p 12000 -s 192.168.128.133:10001 -s 192.168.128.133:10002 -s 192.168.128.133:10003 -b 192.168.128.133:10004 -b 192.168.128.133:10005

  執行命令後 可以先查看是否啓動成功

  ps -ef | grep magent

  出現2行 OK,繼續

  在XP客戶端上測試

   直接連接magent 端口 12000

  telnet 192.168.128.133 12000

  執行stats

  

說明magent 裏面已經負載了3個memcached 端口

  接着我們繼續set

set key1 0 0 1
1
STORED
set key2 0 0 1
2
STORED
set key3 0 0 1
3
STORED

 

 好了 依次設置了3個key ,這裏說明下參數 <command name> <key> <flags> <exptime> <bytes>\r\n

 詳細的解釋大家請看:http://blog.zol.com.cn/737/article_736087.html

  既然設置了3個key,我們來讀取看

  執行命令get key1 get key2 get key3

  依次返回了

 到此,一個緩存寫入已經存取的過程就完成了,但是我們要了解其中的過程呀,哈哈

  然後我們直接登陸memcached的端口get數據看 它是怎麼樣保存的

  先telnet 192.168.128.133 10001

      執行stats

  STAT pid 7496
STAT uptime 894
STAT time 1319202978
STAT version 1.2.6
STAT pointer_size 32
STAT rusage_user 0.000000
STAT rusage_system 0.001999
STAT curr_items 1
STAT total_items 1
STAT bytes 54
STAT curr_connections 3
STAT total_connections 4
STAT connection_structures 4
STAT cmd_get 1
STAT cmd_set 1
STAT get_hits 1
STAT get_misses 0
STAT evictions 0
STAT bytes_read 36
STAT bytes_written 32
STAT limit_maxbytes 1048576
STAT threads 1\STAT threads 1\

 

說明10001只緩存了1個key

  我們看是存的哪一個

get key1
VALUE key1 0 1
1
END

  OK存的key1

再telnet 192.168.128.133 10002

直接

get key1
END
get key2
VALUE key2 0 1
2
END
get key3
END
get key4
END
get key5
END

說明10002上緩存的key2啊,

這樣不難看出10003上應該是緩存的key3了

  試試

  telnet 192.168.128.133 10003

然後

get key1
END
get key2
END
get key3
VALUE key3 0 1
3
END
get key4
END
get key5
END

到此 知道了magent是根據自己的算法 把要緩存的內容依次分發到後端的memcached的,至於具體的算法就不知道了,我個人認爲應該是依次分發的吧,當然此memcached存活的前提下,

 

知道了主服務器是分發負載的,不知道備用服務器是不是這樣,

  進telnet 192.168.128.133 10004

  依次

get key1
END
get key2
VALUE key2 0 1
2
END
get key3
END
get key4
END
get key5
END

  發現 備用服務10004 並沒有全部緩存3個key,就是之前的key1 key2 key3

再進 telnet 192.168.128.133 10005

get key1

VALUE key1 0 1
1
END
get key2
END
get key3
VALUE key3 0 1
3
END
get key4
END
get key5
END
看來備用服務器也是實現了負載啊,哈哈,估計算法還是跟主服務器的一樣吧,

 

  然後我把主服務器的10001 10002 10003的進程全部kill了

root      7496     1  0 21:01 ?        00:00:00 memcached -m 1 -u root -d -l 192.168.128.133 -p 10001
root      7498     1  0 21:01 ?        00:00:00 memcached -m 1 -u root -d -l 192.168.128.133 -p 10002
root      7500     1  0 21:01 ?        00:00:00 memcached -m 1 -u root -d -l 192.168.128.133 -p 10003

kill 7496 7498 7500

再在magent的端口上get key1
VALUE key1 0 1
1
END
get key2
VALUE key2 0 1
2
END
get key3
VALUE key3 0 1
3
END

 

並不影響取值。

  不過如果備用服務器也死了的話,就無力了,

  到此測試結束咯


發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章