中小企業web集羣方案 haproxy+varnish+LNMP+memcached配置

原創 yunweixiaoyu 2019-02-22 13:25

    前段時間幫一箇中型企業做了一個集羣方案配置，目前已經安全運行了一個月，而且速度非常快，穩定性也很強，作爲一般中型企業負載均衡的方案，非常的合適。但是由於資本有限，沒有做到高可用性方案。
一，拓撲圖如下：

 

 
二，架構說明及配置
1, haproxy 服務器： 192.168.1.5            
2, varnish服務器集羣：  192.168.1.20;192.168.1.21
3, nginx+fastcgi 服務器：  192.168.1.50
4, memcached 服務器：memcached我是裝在nginx+fastcgi服務器上的，192.168.1.50
5, mysql服務器：192.168.1.60
三，具體配置以下我們來一個個講解，我們先從後端來個個講解，
1，在192.168.1.60 服務器上安裝 mysql
2,  在192.168.1.50 服務器上安裝 nginx+fastcgi.
mysql+nginx+fastcgi 配置，這裏不講解了，網上包括我的博客裏面都有講解如何時安裝。
3，memcached安裝配置。
  這裏的memcached 我安裝在  192.168.1.50 服務器上 安裝步驟如下：
 （1）下載所需要的軟件 (memcached 目前最新版本爲1.4.13)
安裝memcached需要libevent庫支持，我們下載libevent1.3版本即可
 
  1. #wget  http://memcached.googlecode.com/files/memcached-1.4.13.tar.gz  
  2. #wget  http://www.monkey.org/~provos/libevent-1.3.tar.gz  
（2）先安裝libevent：
 
  1. # tar zxvf libevent-1.3.tar.gz 
  2. # cd libevent-1.3 
  3. # ./configure --prefix=/usr 
  4. # make 
  5. # make install  
（3）安裝memcached，同時需要安裝中指定libevent的安裝位置：
  1. # cd /tmp 
  2. # tar zxvf memcached-1.4.13.tar.gz 
  3. # cd memcached-1.4.13 
  4. # ./configure --with-libevent=/usr 
  5. # make 
  6. # make install 
安裝完成後會把memcached放到 /usr/local/bin/memcached 
（4）fastcgi 安裝memcache擴展模塊，讓php支持memcached
 1.在http://pecl.php.net/package/memcache 選擇相應想要下載的memcache版本。
 2.安裝PHP的memcache擴展
 
  1. #tar vxzf memcache-2.2.1.tgz 
  2. #cd memcache-2.2.1 
  3. #/usr/local/webserver/php/bin/phpize 
  4. #./configure--enable-memcache --with-php-config=/usr/local/webserver/php/bin/php-config --with-zlib-dir 
  5. #make 
  6. #make install 
3.上述安裝完後會有類似這樣的提示：
 
  1. Installing shared extensions: /usr/local/webserver/php/lib/php/extensions/no-debug-non-zts-20060613/
4,在php.ini 添加一行來載入memcache擴展：
 
  1. #extension = "memcache.so" 
  如下圖


5,重新加載php 配置文件

啓動memcached 
 
  1. # /usr/local/bin/memcached -d -m 1024 -u root -l 127.0.0.1 -p 11211 -c 10240 -P /tmp/memcached.pid  
我們來看一下是否正常啓動
端口已正常啓動。
 
  1. memcache啓動參數備註： 
  2. -d選項是啓動一個守護進程， 
  3. -m是分配給Memcache使用的內存數量，單位是MB，我這裏是10MB， 
  4. -u是運行Memcache的用戶，我這裏是root， 
  5. -l是監聽的服務器IP地址，爲了安全我這裏指定了 127.0.0.1， 
  6. -p是設置Memcache監聽的端口，我這裏設置了11211，最好是1024以上的端口， 
  7. -c選項是最大運行的併發連接數，默認是1024，我這裏設置10240，按照你服務器的負載量來設定 
  8. -P是設置保存Memcache的pid文件，我這裏是保存在 /tmp/memcached.pid， 
  9.  
Memcached安裝完畢。我們來測試一下是否能緩存mysql數據
我們在此服務器上架設一個php網站，此處我先用的是佔用資源比較大的magento程序網站，調試好配置文件，綁定一下host文件。看網站是否能正常打開。
 

好，網站打開正常，接下來我們看一下，memcached是否發揮了他的作用
這裏我們用一個軟件 memadmin （網上可以下載到） 來監控一下memcached的緩存命中率，如下圖：
命中率還是挺高的。
 
4，varnish服務器安裝
以下在192.168.1.20 和 192.168.1.21 上操作
下載varnish軟件  （此處下載3.0版本）
 
  1. #wget   http://repo.varnish-cache.org/source/varnish-3.0.0.tar.gz  
  2. #tar -xvf varnish-3.0.0.tar.gz 
  3. #cd varnish-3.0.0 
  4. #./configure --prefix=/usr/local/varnish 
  5. #make &&make install 
至此安裝完成。
我們來配置一下
 
  1. #vim /usr/local/varnish/etc/varnish/vcl.conf 
以下爲配置代碼：(除backend 及vcl_recv外，其他地方無需更改，這裏是更改其訪問的主機名，及定義後端服務器地址，字數有限，其他代碼這裏就不解釋了)
 
  1. #Cache for linuxtone sites 
  2. #backend vhost 
  3. backend  wwwyaozhibingceshicom { 
  4. .host = "www.yaozhibingceshi.com"; 
  5. .port = "80"; 
  6. } 
  7. #acl 
  8. acl purge { 
  9.   "localhost"; 
  10.   "127.0.0.1"; 
  11.   "192.168.0.0"/24; 
  12. } 
  13. sub vcl_recv { 
  14.         if (req.http.Accept-Encoding) { 
  15.             if (req.url ~ "\.(jpg|png|gif|jpeg|flv)$" ) { 
  16.                 remove req.http.Accept-Encoding; 
  17.                 remove req.http.Cookie; 
  18.             } else if (req.http.Accept-Encoding ~ "gzip") { 
  19.                 set req.http.Accept-Encoding = "gzip"; 
  20.             } else if (req.http.Accept-Encoding ~ "deflate") { 
  21.                 set req.http.Accept-Encoding = "deflate"; 
  22.             } else { 
  23.                 remove req.http.Accept-Encoding; 
  24.             } 
  25.         } 
  26.            if (req.http.host ~  "(.*)yaozhibingceshi.com") { 
  27.                        set req.backend = wwwyaozhibingceshicom; 
  28.                  } 
  29.             else { 
  30.                         error 404 "This website is maintaining or not exist！"; 
  31.                 } 
  32.   if (req.request == "PURGE") { 
  33.      if (!client.ip ~purge) { 
  34.        error 405 "Not Allowed"; 
  35.    } 
  36. #.dd..... 
  37.    return(lookup); 
  38.   } 
  39. #...GET...url...jpg,png,gif. ..cookie 
  40.   if (req.request == "GET"&& req.url ~ "\.(png|gif|jpeg|jpg|ico|swf|css|js|html|htm|gz|tgz|bz2|tbz|mp3|ogg|mp4|flv|f4v|pdf)$") { 
  41.         unset req.http.cookie; 
  42.   } 
  43. #..GET...url.php....cache.... 
  44.   if (req.request =="GET"&&req.url ~ "\.php($|\?)"){ 
  45.         return (pass); 
  46.   } 
  47. #     if (req.restarts == 0) { 
  48.         if (req.http.x-forwarded-for) { 
  49.             set req.http.X-Forwarded-For = 
  50.                 req.http.X-Forwarded-For + ", " + client.ip; 
  51.         } else { 
  52.             set req.http.X-Forwarded-For = client.ip; 
  53.         } 
  54. #   } 
  55. #........pipe.. 
  56.     if (req.request != "GET" && 
  57.       req.request != "HEAD" && 
  58.       req.request != "PUT" && 
  59.       req.request != "POST" && 
  60.       req.request != "TRACE" && 
  61.       req.request != "OPTIONS" && 
  62.       req.request != "DELETE") { 
  63.         return (pipe); 
  64.     } 
  65. #..GET .HEAD..... 
  66.     if (req.request != "GET" && req.request != "HEAD") { 
  67.         return (pass); 
  68.     } 
  69.     if (req.http.Authorization) { 
  70.         return (pass); 
  71.     } 
  72.     return (lookup); 
  73. } 
  74. #..url+host hash...... 
  75. sub vcl_hash { 
  76.     hash_data(req.url); 
  77.     if (req.http.host) { 
  78.         hash_data(req.http.host); 
  79.     } else { 
  80.         hash_data(server.ip); 
  81.     } 
  82.     return (hash); 
  83. } 
  84. # .....purge ..... 
  85. sub vcl_hit { 
  86.    if (req.request == "PURGE") { 
  87.        set obj.ttl = 0s; 
  88.        error 200 "Purged"; 
  89.     } 
  90.     return (deliver); 
  91. } 
  92. sub vcl_fetch { 
  93.           if (req.url ~ "\.(jpeg|jpg|png|gif|gz|tgz|bz2|tbz|mp3|ogg|ico|swf|flv|dmg|js|css|html|htm)$") { 
  94.                    set beresp.ttl = 2d; 
  95.                    set beresp.http.expires = beresp.ttl; 
  96.                    set beresp.http.Cache-Control = "max-age=172800"; 
  97.                    unset beresp.http.set-cookie; 
  98.           } 
  99.           if (req.url ~ "\.(dmg|js|css|html|htm)$") { 
  100.                    set beresp.do_gzip = true; 
  101.           } 
  102.           if (beresp.status == 503) { 
  103.                          set beresp.saintmode = 15s; 
  104.           } 
  105. } 
  106. sub vcl_deliver { 
  107.         set resp.http.x-hits = obj.hits ; 
  108.         if (obj.hits > 0) { 
  109.                 set resp.http.X-Cache = "HIT You!"; 
  110.         } else { 
  111.                 set resp.http.X-Cache = "MISS Me!"; 
  112.         } 
  113. } 
配置文件保存退出 ,並啓動 varnish,如下圖

由於我這域名沒有註冊，所以我們在這兩臺機器的hosts文件裏綁定一下
 

另外一臺機器我們同樣配置
Varnish 已經成功啓動了,我們來分別把域名在本地綁定一下，直接訪問varnish服務器，看是否能正常打開網站，並查看緩存閤中率
從上圖可以看出來，綁定varnish 服務器網站是可以正常打開，而且從varnish自帶的命令 varnishstat 來看，平均緩存命中率能達到 92%，命中率也是非常的高！另一臺同樣的測試方法
至此，varnish 服務器集羣安裝配置完成。
5，Haproxy 服務器安裝配置
以下配置在 192.168.1.5;192.168.1.6 服務器上運行
下載 haproxy 軟件 （目前最新版本爲1.4.19）
 
  1. wget http://haproxy.1wt.eu/download/1.4/src/haproxy-1.4.19.tar.gz   
  2. #tar -xvf haproxy-1.4.19.tar.gz 
  3. #cd haproxy-1.4.19 
  4. #make TARGET=linux26 PREFIX=/usr/local/haproxy 
  5. #make install PREFIX=/usr/local/haproxy 
安裝完成，接下來配置一下 我解析幾個比較重要的參數
 
  1. # cd /usr/local/haproxy 
  2. # vim haproxy.conf 
  3. global 
  4.         maxconn 5120 
  5.         chroot /usr/local/haproxy 
  6.         uid 99 
  7.         gid 99 
  8.         daemon 
  9.         quiet 
  10.         nbproc  2 
  11.         pidfile /usr/local/haproxy/haproxy.pid 
  12. defaults 
  13.         log     global 
  14.         mode    http 
  15.         option  httplog 
  16.         option  dontlognull 
  17.         log 127.0.0.1 local3 
  18.         retries 3 
  19.         option redispatch 
  20.         maxconn 20000 
  21.         contimeout      5000 
  22.         clitimeout      50000 
  23.         srvtimeout      50000 
  24. listen www.yaozhibingceshi.com 0.0.0.0:80 
  25.        mode http 
  26.        stats uri /status                     (後端服務器狀態查看地址)   
  27.        stats realm Haproxy\ statistics 
  28.        stats auth admin:admin              （狀態查看頁面登陸帳號密碼） 
  29.        balance source    （調度算法，調度算法有很多，我這裏用source是和nginx的ip_hash同理，解決session問題) 
  30.        option httpclose 
  31.        option forwardfor 
  32. server app1_1 192.168.1.20:80 cookie app1inst1 check inter 2000 rise 2 fall 5 
  33. server app1_2 192.168.1.21:80 cookie app1inst2 check inter 2000 rise 2 fall 5 
最下面兩行，定義了後端的兩臺服務器，如果有更多，再另起一行，根據上面的格式寫上即可。
配置好後，啓動haproxy  並查看是否啓動成功

這樣看，是啓動成功了的
好的，我們來把域名。綁定到這臺haproxy服務器上看網站是否能正常打開。

我們發現，網站也是可以正常打開的，
haproxy 有宕機檢測功能，當後端服務器宕機後，他能自動檢測，並禁止鏈接再發往宕機的機器.
注：haproxy 後端服務器狀態查看方法
配置文件裏註明了   stats uri /status  即訪問 www.域名.com/status 即可查看後端服務器狀態
如圖：
 

 

這次方案由於資本有限，所以在服務器這塊，大大的減少了。如果做到高可用性，
應該要做到 haproxy 集羣，nginx+fastcgi集羣，以及數據庫這塊的集羣。
但是道理都是一樣的，只是多加一些服務器，要達到千萬級PV的網站，借用老男孩的一句來說，就是“把所有的用戶訪問請求都儘量往前推 ”。
QQ：410018348

 

發表評論
所有評論
還沒有人評論，想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章

21.5 memcached命令行；21.6 memcached數據導出和導入；21.7 php連接

13011150876 2019-02-23 00:41:10

分佈式memcached服務器代理magent安裝配置（CentOS6.6）

zhangrui_123 2019-02-23 00:38:18

nginx+tomcat+memcached

河邊的石子 2019-02-23 00:31:06

memcached

yuanxingdexin 2019-02-23 00:30:45

Varnish的基本應用詳解

SueK1ng 2019-02-23 00:41:43

高性能HTTP加速器Varnish（概念篇）

曼尼 2019-02-23 00:31:43

nginx反代varnish緩存服務器實現後端amp動靜分離架構

Runs_ 2019-02-23 00:28:11

搭建cdn的高性能HTTP加速器Varnish服務器

ptallrights 2019-02-23 00:22:29

實戰varnish

jie783213507 2019-02-23 00:21:44

HAProxy

335729167 2019-02-23 13:00:44

HAproxy均衡負載部署和配置文件詳解

vfast_wuwei 2019-02-23 12:55:20

haproxy實現動靜分離

SueK1ng 2019-02-23 00:41:43

haproxy負載均衡保持客戶端和服務器Session親緣性的三種方式:

kexl 2019-02-23 00:18:40

haproxy配置詳解

時光的印記 2019-02-23 00:18:22

mycat+haproxy服務與高可用（3）

運維小白菜 2019-02-23 00:17:26