Tomcat6集羣 + Apache + Nginx均衡負載及其測試
Tomcat6 集羣配置端口規劃:
注:該端口是在同一臺機器上啓動2個tomcat,需要修改一下端口不重複,如果一臺機器只部署1個tomcat其端口可以一樣。
序號 |
SHUTDOWN |
AJP |
http |
集羣Receiver |
1 |
8005 |
8009 |
8080 |
5001 |
2 |
8015 |
8019 |
8081 |
5002 |
Tomcat6集羣配置:
在server.xml中修改:
將:
<Engine name="Catalina" defaultHost="localhost"> |
修改爲:
<Engine name="Catalina" defaultHost="localhost" jvmRoute="jvm1"> |
其中 jvmRoute="jvm1" 在不同的tomcat中名稱不一樣。
在<Engine></Engine>節點中加入如下內容:
<Cluster className="org.apache.catalina.ha.tcp.SimpleTcpCluster" channelSendOptions="6"> <Manager className="org.apache.catalina.ha.session.BackupManager" expireSessionsOnShutdown="false" notifyListenersOnReplication="true" mapSendOptions="6" /> <!-- <Manager className="org.apache.catalina.ha.session.DeltaManager" expireSessionsOnShutdown="false" notifyListenersOnReplication="true"/> --> <Channel className="org.apache.catalina.tribes.group.GroupChannel"> <Membership className="org.apache.catalina.tribes.membership.McastService" address="228.0.0.4" port="45564" frequency="500" dropTime="3000" /> <Receiver className="org.apache.catalina.tribes.transport.nio.NioReceiver" address="auto" port="5001" selectorTimeout="100" maxThreads="6" /> <Sender className="org.apache.catalina.tribes.transport.ReplicationTransmitter"> <Transport className="org.apache.catalina.tribes.transport.nio.PooledParallelSender" /> </Sender> <Interceptor className="org.apache.catalina.tribes.group.interceptors.TcpFailureDetector" /> <Interceptor className="org.apache.catalina.tribes.group.interceptors.MessageDispatch15Interceptor" /> <Interceptor className="org.apache.catalina.tribes.group.interceptors.ThroughputInterceptor" /> </Channel> <Valve className="org.apache.catalina.ha.tcp.ReplicationValve" filter=".*/.gif;.*/.js;.*/.jpg;.*/.png;.*/.htm;.*/.html;.*/.css;.*/.txt;" /> <ClusterListener className="org.apache.catalina.ha.session.ClusterSessionListener" /> </Cluster> |
注意在同一臺機器上:Receiver 節點端口: port="5001" 要不一樣。
優化:
內存優化配置:
Windows:
set JAVA_OPTS = " -server -Xms512M -Xmx2048M -XX:MaxNewSize=256M -XX:PermSize=256M -XX:MaxPermSize=512M -XX:+UseConcMarkSweepGC -XX:+PrintGCDetails -XX:+PrintGCTimeStamps -Djava.awt.headless=true" |
Linux:
JAVA_OPTS = " -server -Xms512M -Xmx2048M -XX:MaxNewSize=256M -XX:PermSize=256M -XX:MaxPermSize=512M -XX:+UseConcMarkSweepGC -XX:+PrintGCDetails -XX:+PrintGCTimeStamps -Djava.awt.headless=true" |
其他優化配置:
1、加入如下配置1:
<Executor name="tomcatThreadPool" namePrefix="catalina-exec-" maxThreads="500" minSpareThreads="50" /> |
修改
<Connector port="8080" protocol="HTTP/1.1" connectionTimeout="20000" redirectPort="8443" /> |
爲:
<Connector port="8080" executor="tomcatThreadPool" protocol="HTTP/1.1" connectionTimeout="60000" enableLookups="false" redirectPort="8443" /> |
修改:
<Connector port="8009" protocol="AJP/1.3" redirectPort="8443" /> |
爲:
<Connector port="8009" executor="tomcatThreadPool" connectionTimeout="60000" enableLookups="false" redirectPort="8443" protocol="AJP/1.3" /> |
2、或者:
修改
<Connector port="8080" protocol="HTTP/1.1" connectionTimeout="20000" redirectPort="8443" /> |
爲:
<Connector port="8080" protocol="HTTP/1.1" maxThreads="500" acceptCount="50" connectionTimeout="60000" enableLookups="false" redirectPort="8443" /> |
修改:
<Connector port="8009" protocol="AJP/1.3" redirectPort="8443" /> |
爲:
<Connector port="8009" maxThreads="500" connectionTimeout="60000" enableLookups="false" redirectPort="8443" protocol="AJP/1.3" /> |
注:兩者的主要區別是:executor被起用且關聯時maxThreads="500" 被忽略。
幾個屬性解釋:
maxThreads
Tomcat使用線程來處理接收的每個請求。這個值表示Tomcat可創建的最大的線程數。默認值200。 可以根據機器的時期性能和內存大小調整,一般可以在400-500。最大可以在800左右。
acceptCount
指定當所有可以使用的處理請求的線程數都被使用時,可以放到處理隊列中的請求數,超過這個數的請求將不予處理。默認值10。
minSpareThreads
Tomcat初始化時創建的線程數。默認值4。
connnectionTimeout
網絡連接超時,默認值20000,單位:毫秒。設置爲0表示永不超時,這樣設置有隱患的。通常可設置爲30000毫秒。(本系統由於與後臺系統接口超時時間較長,使用設置爲60000)
enableLookups
是否反查域名,默認值爲true。爲了提高處理能力,應設置爲false
Executor節點
表示Tomcat組件之間共享的線程池。
maxIdleTime
空閒線程被關閉之前的毫秒數。默認值是60000。
Nginx + Tomcat負載均衡配置:
在配置文件
upstream tomcat6 { server 192.168.100.50:8080 weight=1; server 192.168.100.50:8081 weight=1; } |
其中tomcat6名稱隨意,注意IP地址和端口。
修改Server節點中location:
location / { root html; index index.html index.htm; } |
爲:
location / { #root html; #index index.html index.htm; proxy_pass http://tomcat6; } |
注意http://tomcat6中tomcat6名稱與上面的配置一樣。
Apache + Tomcat 負載均衡配置:
Apache Http Server與Tomcat連接有三種方式,可以參考:
http://www.ibm.com/developerworks/cn/opensource/os-lo-apache-tomcat/index.html
本文只介紹最常用的JK方式,需要2個文件:
1、httpd.conf
Apache 服務器的配置文件,用來加載 JK 模塊以及指定 JK 配置文件信息
2、workers.properties
到 Tomcat 服務器的連接定義文件。
下面是一個典型的 httpd.conf 對 JK 的配置:
# (httpd.conf) # 加載 mod_jk 模塊 LoadModule jk_module modules/mod_jk.so
# # Configure mod_jk #
JkWorkersFile conf/workers.properties JkMountFile conf/uriworkermap.properties JkLogFile logs/mod_jk.log JkLogLevel warn |
mod_jk.so文件可以從http://labs.xiaonei.com/apache-mirror/tomcat/tomcat-connectors/jk/binaries/下載,下載源代碼後需要編譯,下載二進制後直接複製到apache目錄modules文件夾下面,修改上面配置文件LoadModule jk_module modules/mod_jk.so,注意其對應其apache的版本2.0.x和2.2.x,以及不同的平臺。一般對於AIX,HP-UX平臺已經包含了mod_jk.so文件不需要再下載或編譯,HP-UX一般apache目錄在/opt/hpws/apache/。
上面配置也可單獨拆分爲一個單獨的文件,建立mod_jk.conf文件加入上面配置內容,在httpd.conf中加入如下內容即可:
Include conf/mod_jk.conf
接下來在 Apache 的 conf 目錄下新建文件: workers.properties
worker.list = controller,tomcat1,tomcat2,tomcat3,tomcat4 #server 列表
#========tomcat1======== worker.tomcat1.port=8009 #ajp13 端口號,在tomcat下server.xml配置,默認8009 worker.tomcat1.host=192.168.1.99 #tomcat的主機地址,如不爲本機,請填寫ip地址 worker.tomcat1.type=ajp13 worker.tomcat1.lbfactor = 1 #server的加權比重,值越高,分得的請求越多 #========tomcat2======== worker.tomcat2.port=9009 #ajp13 端口號,在tomcat下server.xml配置,默認8009 worker.tomcat2.host=192.168.1.99 #tomcat的主機地址,如不爲本機,請填寫ip地址 worker.tomcat2.type=ajp13 worker.tomcat2.lbfactor = 1 #server的加權比重,值越高,分得的請求越多 #========tomcat3======== worker.tomcat3.port=8009 #ajp13 端口號,在tomcat下server.xml配置,默認8009 worker.tomcat3.host=192.168.1.100 #tomcat的主機地址,如不爲本機,請填寫ip地址 worker.tomcat3.type=ajp13 worker.tomcat3.lbfactor = 1 #server的加權比重,值越高,分得的請求越多 #========tomcat4======== worker.tomcat4.port=9009 #ajp13 端口號,在tomcat下server.xml配置,默認8009 worker.tomcat4.host=192.168.1.100 #tomcat的主機地址,如不爲本機,請填寫ip地址 worker.tomcat4.type=ajp13 worker.tomcat4.lbfactor = 1 #server的加權比重,值越高,分得的請求越多
#========controller,負載均衡控制器======== worker.controller.type=lb worker.controller.balanced_workers=tomcat1,tomcat2,tomcat3,tomcat4 #指定分擔請求的tomcat worker.controller.sticky_session=false #worker.controller.sticky_session=1 #此處指定集羣是否需要會話複製,如果設爲true,則表明爲會話粘性,不進行會話複製 |
測試:
命令:ab -n 50000 -c 1000 http://127.0.0.1/index.jsp
根據具體情況增加或減少-n -c 參數大小
本文鏈接:http://blog.csdn.net/myloon/archive/2009/11/05/4774320.aspx