【轉】【Docker】【Nginx】Docker+nginx+tomcat7配置簡單的負載均衡

https://yq.aliyun.com/ziliao/29104

原始地址爲:http://www.cnblogs.com/fengzheng/p/4995513.html 

本文介紹在Docker上配置簡單的負載均衡,宿主機爲Ubuntu 14.04.2 LTS,兩個CentOS容器,宿主機安裝Nginx,兩臺容器安裝tomcat7。結構如下:

此方案的原理是將宿主機的端口和docker容器的端口做一個映射(即訪問宿主機的某端口會映射到docker容器對應的端口),然後在宿主機通過配置Nginx,即可達到訪問宿主機的某端口,按規則分配到指定的服務地址,即完成了負載均衡。 

配置步驟

1.準備宿主機,宿主機是Ubuntu 14.04.2 LTS,安裝在Vmware中,具體安裝方式不做贅述。

2.在宿主機中安裝Nginx,直接用如下命令即可。

本文介紹在Docker上配置簡單的負載均衡,宿主機爲Ubuntu 14.04.2 LTS,兩個CentOS容器,宿主機安裝Nginx,兩臺容器安裝tomcat7。結構如下:

使用Docker+nginx+tomcat7配置負載均衡步驟-docker nginx負載均衡

此方案的原理是將宿主機的端口和docker容器的端口做一個映射(即訪問宿主機的某端口會映射到docker容器對應的端口),然後在宿主機通過配置Nginx,即可達到訪問宿主機的某端口,按規則分配到指定的服務地址,即完成了負載均衡。 

配置步驟

1.準備宿主機,宿主機是Ubuntu 14.04.2 LTS,安裝在Vmware中,具體安裝方式不做贅述。

2.在宿主機中安裝Nginx,直接用如下命令即可。

sudo apt-get install nginx

安裝完成後,可以查看Nginx是否安裝完成,可以用如下命令查看版本,打印出Nginx版本,則說明安裝成功。

$ nginx -v<br>
nginx version: nginx/1.4.6 (Ubuntu)

之後,可以用如下命令啓動Nginx服務:

#啓動服務
$ sudo service nginx start
 
#查看服務狀態
$ sudo service nginx status
* nginx is running   #說明服務是啓動狀態

在瀏覽器中訪問http://localhost,顯示結果如下:

使用Docker+nginx+tomcat7配置負載均衡步驟-nginx tomcat負載均衡

 

3.下載Docker鏡像,用docker pull命令即可,具體鏡像操作可參看這篇文章  

4.啓動一個容器並設置端口映射,其中一臺命令如下:

sudo docker run -t -i -p 3222:22 -p 3280:80 87e5b6b3ccc1 /bin/bash

上面的命令是以標準的bash輸出方式啓動一個容器,設置端口映射,用-p參數,-p 宿主機端口:docker容器端口 ,上面的命令是設置宿主機的3222端口映射到容器的22端口,設置宿主機的3280的端口映射到容器的80端口。

5.在容器中安裝jre和tomcat7.0,安裝jre

wget -O jre-7u6-linux-x64.rpm http://javadl.sun.com/webapps/download/AutoDL?BundleId=67387
 
yum install jre-7u6-linux-x64.rpm

查看jre是否安裝成功

java -version
java version "1.7.0_06"
Java(TM) SE Runtime Environment (build 1.7.0_06-b24)
Java HotSpot(TM) 64-Bit Server VM (build 23.2-b09, mixed mode)

安裝tomcat7.0

wget http://apache.fayea.com/tomcat/tomcat-7/v7.0.65/bin/apache-tomcat-7.0.65.tar.gz
tar -zxvf  apache-tomcat-7.0.65.tar.gz

啓動tomcat,進入解壓目錄,cd到bin目錄,執行命令並輸入如下信息,說明tomcat啓動成功

bash startup.sh
Using CATALINA_BASE:   /home/apache-tomcat-7.0.65
Using CATALINA_HOME:   /home/apache-tomcat-7.0.65
Using CATALINA_TMPDIR: /home/apache-tomcat-7.0.65/temp
Using JRE_HOME:        /usr
Using CLASSPATH:       /home/apache-tomcat-7.0.65/bin/bootstrap.jar:/home/apache-tomcat-7.0.65/bin/tomcat-juli.jar
Tomcat started.

由於tomcat默認端口是8080,這裏設置的是80端口,所以,需要修改默認端口到80,進入tomcat安裝目錄的conf目錄,用vi打開server.xml文件,將如下配置

<Connector port="8080" protocol="HTTP/1.1"
              connectionTimeout="20000"
              redirectPort="8443" />

修改爲

<Connector port="80" protocol="HTTP/1.1"
              connectionTimeout="20000"
              redirectPort="8443" />

之後,在這臺docker容器中,訪問http://localhost,可以訪問到tomcat主頁,說明tomcat安裝並配置成功。

6.進入tomcat的webapps/ROOT目錄中,由於這個容器的ip爲172.17.0.2,創建一個hello.html文件,在文件中寫上如下內容“hello this is 172.17.0.2”,然後在宿主機訪問http://172.17.0.2/hello.html,顯示內容如下:

 

使用Docker+nginx+tomcat7配置負載均衡步驟-nginxtomcat負載均衡

7.同上面的步驟一致,配置另外一臺容器,只是容器啓動時設置的映射端口有所區別,命令如下:
    
sudo docker run -t -i -p 3322:22 -p 3380:80 87e5b6b3ccc1 /bin/bash

最後在這臺容器tomcat安裝目錄的webapps/ROOT目錄下創建hello.html文件,因爲這臺容器的ip爲172.17.0.3,所以hello.html文件中填入的內容爲“hello this is 170.17.0.3”,之後在宿主機訪問http://172.17.0.3/hello.html,顯示如下內容:

 

使用Docker+nginx+tomcat7配置負載均衡步驟-docker負載均衡



8.容器配置完成後,剩下的工作就是配置宿主機的Nginx,用來完成負載均衡工作。

進入/etc/nginx目錄,用vim編輯nginx.conf,在http節點中增加如下內容:

server {
                listen 80;
                server_name 192.168.1.106;
                location  / {
                        proxy_pass http://blance;
                }
        }
 
        upstream blance{
                server localhost:3280 weight=5;
                server localhost:3380 weight=5;
        }

首先定義一個upstream,設置web服務器的端口映射和權重,之後定義一個server,監聽80端口,server_name爲192.168.1.106,這是宿主機的ip地址(可配置成域名),“location /” 意思是監聽80端口下的所有請求,並使用上面設置的upstream作爲代理。

9.完成以上配置並保存後,在瀏覽器中訪問http://192.168.1.106/hello.html,並刷新頁面,會發現頁面有時顯示“hello this is 172.17.0.3”,有時顯示“hello this is 172.17.0.2”,說明配置成功,這樣就完成了一個簡單的負載均衡環境的配置。

 

Nginx+Tomcat 負載均衡集羣方案

該方案是我之前做過的一個項目生產應用的,目前運行良好,如何您生產使用,請先做好測試。

系統架構圖

使用Docker+nginx+tomcat7配置負載均衡步驟-docker swarm負載均衡

下載軟件包

" ][root@Nginx-node1 src]# cd /usr/local/src
[root@Nginx-node1 src]# wget ftp://ftp.csx.cam.ac.uk/pub/software/programming/pcre/pcre-8.02.tar.gz
[root@Nginx-node1 src]# wget http://nginx.org/download/nginx-0.8.34.tar.gz
[root@Nginx-node1 src]# wget http://www.keepalived.org/software/keepalived-1.1.19.tar.gz
[root@Nginx-node1 src]# chmod +x *
[root@Nginx-node1 src]# ls -l
-rwxr-xr-x 1 root root  241437 10-01 17:25 keepalived-1.1.19.tar.gz
-rwxr-xr-x 1 root root  621534 03-04 01:00 nginx-0.8.34.tar.gz
-rwxr-xr-x 1 root root 1247730 03-31 16:31 pcre-8.02.tar.gz

" ][root@Nginx-node1 src]# cd /usr/local/src
[root@Nginx-node1 src]# wget ftp://ftp.csx.cam.ac.uk/pub/software/programming/pcre/pcre-8.02.tar.gz
[root@Nginx-node1 src]# wget http://nginx.org/download/nginx-0.8.34.tar.gz
[root@Nginx-node1 src]# wget http://www.keepalived.org/software/keepalived-1.1.19.tar.gz
[root@Nginx-node1 src]# chmod +x *
[root@Nginx-node1 src]# ls -l
-rwxr-xr-x 1 root root  241437 10-01 17:25 keepalived-1.1.19.tar.gz
-rwxr-xr-x 1 root root  621534 03-04 01:00 nginx-0.8.34.tar.gz
-rwxr-xr-x 1 root root 1247730 03-31 16:31 pcre-8.02.tar.gz

安裝Nginx

安裝Nginx依賴的包

" ][root@Nginx-node1 src]# tar zxvf pcre-8.02.tar.gz
[root@Nginx-node1 src]# cd pcre-8.02
[root@Nginx-node1 pcre-8.02]# ./configure
[root@Nginx-node1 pcre-8.02]# make &amp;&amp; make install

" ][root@Nginx-node1 src]# tar zxvf pcre-8.02.tar.gz
[root@Nginx-node1 src]# cd pcre-8.02
[root@Nginx-node1 pcre-8.02]# ./configure
[root@Nginx-node1 pcre-8.02]# make &amp;&amp; make install

安裝Nginx

" ][root@Nginx-node1 pcre-8.02]# cd ../
[root@Nginx-node1 src]# tar zxvf nginx-0.8.34.tar.gz 
[root@Nginx-node1 src]# cd nginx-0.8.34
[root@Nginx-node1 nginx-0.8.34]# ./configure --prefix=/usr/local/nginx \
&gt; --with-http_stub_status_module \
&gt; --with-http_ssl_module 
[root@Nginx-node1 nginx-0.8.34]# make &amp;&amp; make install
[root@Nginx-node1 ~]# vim /usr/local/nginx/conf/nginx.conf

" ][root@Nginx-node1 pcre-8.02]# cd ../
[root@Nginx-node1 src]# tar zxvf nginx-0.8.34.tar.gz 
[root@Nginx-node1 src]# cd nginx-0.8.34
[root@Nginx-node1 nginx-0.8.34]# ./configure --prefix=/usr/local/nginx \
&gt; --with-http_stub_status_module \
&gt; --with-http_ssl_module 
[root@Nginx-node1 nginx-0.8.34]# make &amp;&amp; make install
[root@Nginx-node1 ~]# vim /usr/local/nginx/conf/nginx.conf

Nginx 配置文件

" ]user  website website;
worker_processes  4;

error_log  logs/error.log;
pid        logs/nginx.pid;
worker_rlimit_nofile 65535;

events {
    use epoll;
    worker_connections  10240;
}
http {
    include       mime.types;
    default_type  application/octet-stream;
    server_names_hash_bucket_size 128;
    client_header_buffer_size 32k;
    large_client_header_buffers 4 32k;
    client_max_body_size 8m;
    sendfile on;
    tcp_nopush     on;
    keepalive_timeout 60;
    tcp_nodelay on;

    gzip on;
    gzip_min_length  1k;
    gzip_buffers     4 16k;
    gzip_http_version 1.0;
    gzip_comp_level 2;
    gzip_types       text/plain application/x-javascript text/css application/xml;
    gzip_vary on;

    server_tokens off;

upstream web  #設置web集羣池

{
ip_hash; #
server 192.168.0.141:8080;
server 192.168.0.142:8080;
server 192.168.0.143:8080;
server 192.168.0.144:8080;
server 192.168.0.145:8080;
server 192.168.0.146:8080;

}

upstream wap  #設置wap集羣池
{
ip_hash;
server 192.168.0.151:8080;
server 192.168.0.152:8080;
server 192.168.0.153:8080;
server 192.168.0.154:8080;
server 192.168.0.155:8080;
server 192.168.0.156:8080;

}

    server {
        listen       80;
        server_name  www.***.com;

        location / {
            root   html;
            index  index.html index.htm;
        proxy_redirect off;
        proxy_set_header Host $host;
        proxy_set_header X-Real-IP $remote_addr;
        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
        proxy_pass http://web;  #注意設置在這裏
        }

        error_page   500 502 503 504  /50x.html;
        location = /50x.html {
            root   html;
        }

    }

server {
        listen       80;
       server_name  wap.***.com;

        location / {
            root   html;
            index  index.html index.htm;
            proxy_redirect off;
            proxy_set_header Host $host;
            proxy_set_header X-Real-IP $remote_addr;
            proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
            proxy_pass http://wap;  #注意:設置在這裏
        }
        error_page   500 502 503 504  /50x.html;
        location = /50x.html {
            root   html;
        }

    }
}

" ]user  website website;
worker_processes  4;
 
error_log  logs/error.log;
pid        logs/nginx.pid;
worker_rlimit_nofile 65535;
 
events {
    use epoll;
    worker_connections  10240;
}
http {
    include       mime.types;
    default_type  application/octet-stream;
    server_names_hash_bucket_size 128;
    client_header_buffer_size 32k;
    large_client_header_buffers 4 32k;
    client_max_body_size 8m;
    sendfile on;
    tcp_nopush     on;
    keepalive_timeout 60;
    tcp_nodelay on;
 
    gzip on;
    gzip_min_length  1k;
    gzip_buffers     4 16k;
    gzip_http_version 1.0;
    gzip_comp_level 2;
    gzip_types       text/plain application/x-javascript text/css application/xml;
    gzip_vary on;
 
    server_tokens off;
 
upstream web  #設置web集羣池
{
ip_hash; #
server 192.168.0.141:8080;
server 192.168.0.142:8080;
server 192.168.0.143:8080;
server 192.168.0.144:8080;
server 192.168.0.145:8080;
server 192.168.0.146:8080;
 
}
 
upstream wap  #設置wap集羣池
{
ip_hash;
server 192.168.0.151:8080;
server 192.168.0.152:8080;
server 192.168.0.153:8080;
server 192.168.0.154:8080;
server 192.168.0.155:8080;
server 192.168.0.156:8080;
 
}
 
    server {
        listen       80;
        server_name  www.***.com;
 
        location / {
            root   html;
            index  index.html index.htm;
        proxy_redirect off;
        proxy_set_header Host $host;
        proxy_set_header X-Real-IP $remote_addr;
        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
        proxy_pass http://web;  #注意設置在這裏
        }
 
        error_page   500 502 503 504  /50x.html;
        location = /50x.html {
            root   html;
        }
 
    }
 
server {
        listen       80;
       server_name  wap.***.com;
 
        location / {
            root   html;
            index  index.html index.htm;
            proxy_redirect off;
            proxy_set_header Host $host;
            proxy_set_header X-Real-IP $remote_addr;
            proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
            proxy_pass http://wap;  #注意:設置在這裏
        }
        error_page   500 502 503 504  /50x.html;
        location = /50x.html {
            root   html;
        }
 
    }
}

Nginx Upstream支持的分配方法

 

nginx的upstream目前支持5種方式的分配

*1.輪詢(默認)

每個請求按時間順序逐一分配到不同的後端服務器,如果後端服務器down掉,能自動剔除。

*2.weight (帶權重的)

指定輪詢權重,weight和訪問比率成正比,用於後端服務器性能不均的情況。

例如:

" ]upstream bakend {
server 192.168.0.141 weight=10;
server 192.168.0.142 weight=10;
}

" ]upstream bakend {
server 192.168.0.141 weight=10;
server 192.168.0.142 weight=10;
}

*3.ip_hash

每個請求按訪問ip的hash結果分配,這樣每個訪客固定訪問一個後端服務器,可以解決session的問題。

例如:

" ]upstream bakend {
ip_hash;
server 192.168.0.151:80;
server 192.168.0.152:80;
}

" ]upstream bakend {
ip_hash;
server 192.168.0.151:80;
server 192.168.0.152:80;
}

*4.fair(第三方)

按後端服務器的響應時間來分配請求,響應時間短的優先分配。

" ]upstream backend {
server server1;
server server2;
fair;
}

" ]upstream backend {
server server1;
server server2;
fair;
}

*5.url_hash(第三方)

按訪問url的hash結果來分配請求,使每個url定向到同一個後端服務器,後端服務器爲緩存時比較有效。

例:在upstream中加入hash語句,server語句中不能寫入weight等其他的參數,hash_method是使用的hash算法

" ]upstream backend {
server squid1:3128;
server squid2:3128;
hash $request_uri;
hash_method crc32;
}

" ]upstream backend {
server squid1:3128;
server squid2:3128;
hash $request_uri;
hash_method crc32;
}

  
*設置說明:

每個設備的狀態設置爲:

1.down 表示單前的server暫時不參與負載
2.weight 默認爲1.weight越大,負載的權重就越大。
3.max_fails :允許請求失敗的次數默認爲1.當超過最大次數時,返回proxy_next_upstream 模塊定義的錯誤
4.fail_timeout:max_fails次失敗後,暫停的時間。
5.backup: 其它所有的非backup機器down或者忙的時候,請求backup機器。所以這臺機器壓力會最輕。
nginx支持同時設置多組的負載均衡,用來給不用的server來使用。
client_body_in_file_only 設置爲On 可以講client post過來的數據記錄到文件中用來做debug
client_body_temp_path 設置記錄文件的目錄 可以設置最多3層目錄
location 對URL進行匹配.可以進行重定向或者進行新的代理 負載均衡

以上是雲棲社區小編爲您精心準備的的內容,在雲棲社區的博客、問答、公衆號、人物、課程等欄目也有的相關內容,歡迎繼續使用右上角搜索按鈕進行搜索服務器 , 文件 , nginx , 負載均衡 , 配置 端口 docker nginx負載均衡、nginx tomcat負載均衡、nginxtomcat負載均衡、docker負載均衡、docker swarm負載均衡,以便於您獲取更多的相關知識。

 

安裝完成後,可以查看Nginx是否安裝完成,可以用如下命令查看版本,打印出Nginx版本,則說明安裝成功。

1

2

$ nginx -v<br>

nginx version: nginx/1.4.6 (Ubuntu)

之後,可以用如下命令啓動Nginx服務:

1

2

3

4

5

6

#啓動服務

sudo service nginx start

 

#查看服務狀態

sudo service nginx status

* nginx is running   #說明服務是啓動狀態

在瀏覽器中訪問http://localhost,顯示結果如下:

3.下載Docker鏡像,用docker pull命令即可,具體鏡像操作可參看這篇文章  

4.啓動一個容器並設置端口映射,其中一臺命令如下:

1

sudo docker run -t -i -p 3222:22 -p 3280:80 87e5b6b3ccc1 /bin/bash

上面的命令是以標準的bash輸出方式啓動一個容器,設置端口映射,用-p參數,-p 宿主機端口:docker容器端口 ,上面的命令是設置宿主機的3222端口映射到容器的22端口,設置宿主機的3280的端口映射到容器的80端口。

5.在容器中安裝jre和tomcat7.0,安裝jre

1

2

3

wget -O jre-7u6-linux-x64.rpm http://javadl.sun.com/webapps/download/AutoDL?BundleId=67387

 

yum install jre-7u6-linux-x64.rpm

查看jre是否安裝成功

1

2

3

4

java -version

java version "1.7.0_06"

Java(TM) SE Runtime Environment (build 1.7.0_06-b24)

Java HotSpot(TM) 64-Bit Server VM (build 23.2-b09, mixed mode)

安裝tomcat7.0

1

2

wget http://apache.fayea.com/tomcat/tomcat-7/v7.0.65/bin/apache-tomcat-7.0.65.tar.gz

tar -zxvf  apache-tomcat-7.0.65.tar.gz

啓動tomcat,進入解壓目錄,cd到bin目錄,執行命令並輸入如下信息,說明tomcat啓動成功

1

2

3

4

5

6

7

bash startup.sh

Using CATALINA_BASE:   /home/apache-tomcat-7.0.65

Using CATALINA_HOME:   /home/apache-tomcat-7.0.65

Using CATALINA_TMPDIR: /home/apache-tomcat-7.0.65/temp

Using JRE_HOME:        /usr

Using CLASSPATH:       /home/apache-tomcat-7.0.65/bin/bootstrap.jar:/home/apache-tomcat-7.0.65/bin/tomcat-juli.jar

Tomcat started.

由於tomcat默認端口是8080,這裏設置的是80端口,所以,需要修改默認端口到80,進入tomcat安裝目錄的conf目錄,用vi打開server.xml文件,將如下配置

1

2

3

<Connector port="8080" protocol="HTTP/1.1"

              connectionTimeout="20000"

              redirectPort="8443" />

修改爲

1

2

3

<Connector port="80" protocol="HTTP/1.1"

              connectionTimeout="20000"

              redirectPort="8443" />

之後,在這臺docker容器中,訪問http://localhost,可以訪問到tomcat主頁,說明tomcat安裝並配置成功。

6.進入tomcat的webapps/ROOT目錄中,由於這個容器的ip爲172.17.0.2,創建一個hello.html文件,在文件中寫上如下內容“hello this is 172.17.0.2”,然後在宿主機訪問http://172.17.0.2/hello.html,顯示內容如下:

7.同上面的步驟一致,配置另外一臺容器,只是容器啓動時設置的映射端口有所區別,命令如下:

1

sudo docker run -t -i -p 3322:22 -p 3380:80 87e5b6b3ccc1 /bin/bash

最後在這臺容器tomcat安裝目錄的webapps/ROOT目錄下創建hello.html文件,因爲這臺容器的ip爲172.17.0.3,所以hello.html文件中填入的內容爲“hello this is 170.17.0.3”,之後在宿主機訪問http://172.17.0.3/hello.html,顯示如下內容:

8.容器配置完成後,剩下的工作就是配置宿主機的Nginx,用來完成負載均衡工作。

進入/etc/nginx目錄,用vim編輯nginx.conf,在http節點中增加如下內容:

1

2

3

4

5

6

7

8

9

10

11

12

server {

                listen 80;

                server_name 192.168.1.106;

                location  / {

                        proxy_pass http://blance;

                }

        }

 

        upstream blance{

                server localhost:3280 weight=5;

                server localhost:3380 weight=5;

        }

首先定義一個upstream,設置web服務器的端口映射和權重,之後定義一個server,監聽80端口,server_name爲192.168.1.106,這是宿主機的ip地址(可配置成域名),“location /” 意思是監聽80端口下的所有請求,並使用上面設置的upstream作爲代理。

9.完成以上配置並保存後,在瀏覽器中訪問http://192.168.1.106/hello.html,並刷新頁面,會發現頁面有時顯示“hello this is 172.17.0.3”,有時顯示“hello this is 172.17.0.2”,說明配置成功,這樣就完成了一個簡單的負載均衡環境的配置。

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章