Apache + Tomcat集羣配置詳解(1)
一、軟件準備
Apache 2.2 : http://httpd.apache.org/download.cgi,下載msi安裝程序,選擇no ssl版本
Tomcat 6.0 : http://tomcat.apache.org/download-60.cgi,下載Tomcat 6.0.18 zip文件
注意:由於Apache和Tomcat項目與集羣相關的模塊均處於持續發展和優化過程中,因此筆者不保證本文配置方法對所有Apache和Tomcat版本均適用。
二、軟件安裝
把Apache安裝爲運行在80端口的Windows服務,安裝成功後在系統服務列表中可以看到Apache2.2服務。對於已安裝IIS的機器,在啓動Apache服務之前必須首先停止IIS Admin服務,不然會因爲端口衝突而無法啓動。服務啓動後在瀏覽器中輸入http://localhost進行測試,如果能看到一個"It works!"的頁面就代表Apache已經正常工作了。
解壓tomcat zip文件到兩個文件夾,分別爲t1和t2,以下均以t1和t2代表兩個tomcat服務器。配置JAVA_HOME和CLASSPATH系統環境變量,分別啓動t1和t2,確保tomcat可用,然後關閉tomcat。
本文僅爲講解配置過程,Apache和tomcat均工作在同一臺機器上。實際部署時沒有任何限制,Apache和單個tomcat可以分別部署在不同的服務器上。
三、Apache配置
Apache 2.2集成了mod_jk功能,相對於1.3版本,不需要再進行繁瑣的worker.properties配置,配置過程大幅簡化。
首先,在Apache安裝目錄下找到conf/httpd.conf文件,以文本編輯器打開。
去掉以下文本前的註釋符(#)以便讓Apache在啓動時自動加載代理(proxy)模塊。
- LoadModule proxy_module modules/mod_proxy.so
- LoadModule proxy_ajp_module modules/mod_proxy_ajp.so
- LoadModule proxy_balancer_module modules/mod_proxy_balancer.so
- LoadModule proxy_connect_module modules/mod_proxy_connect.so
- LoadModule proxy_ftp_module modules/mod_proxy_ftp.so
- LoadModule proxy_http_module modules/mod_proxy_http.so
向下拉動文檔找到節點,在DirectoryIndex index.html後加上index.jsp,這一步只是爲了待會配置完tomcat後能看到小貓首頁,可以不做。
繼續下拉文檔找到Include conf/extra/httpd-vhosts.conf,去掉前面的註釋符。
用文本編輯器打開conf/extra/httpd-vhosts.conf,配置虛擬站點,在最下面加上
- <VirtualHost *:80>
- ServerAdmin 管理員郵箱
- ServerName 域名(沒有可用IP地址代替)
- ServerAlias localhost
- ProxyPass / balancer://cluster/ stickysession=jsessionid nofailover=On
- ProxyPassReverse / balancer://cluster/
- ErrorLog "logs/lbtest-error.log"
- CustomLog "logs/lbtest-access.log" common
- </VirtualHost>
這裏balancer://是告訴Apache需要進行負載均衡的代理,後面的cluster是集羣名,可以隨意取,兩個日誌引擎ErrorLog負責記錄錯誤,CustomLog負責記錄所有的http訪問以及返回狀態,日誌名可以自己取,筆者取爲lbtest。httpd-vhosts.conf配置完畢,回到httpd.conf,在文檔最下面加上
- ProxyRequests Off
- <proxy balancer://cluster>
- BalancerMember ajp://127.0.0.1:8009 loadfactor=1 route=jvm1
- BalancerMember ajp://127.0.0.1:9009 loadfactor=1 route=jvm2
- </proxy>
ProxyRequests Off 是告訴Apache需要使用反向代理(利用Apache進行負載均衡必須使用反向代理,關於更多負載均衡和反向代理詳情可以參閱筆者另一篇博客http://zyycaesar.javaeye.com/admin/blogs/293839), 用於配置工作在tomcat集羣中的所有節點,這裏的"cluster"必須與上面的集羣名保持一致。Apache通過ajp協議與tomcat進行通信,ip地址和端口唯一確定了tomcat節點和配置的ajp接受端口。loadfactor是負載因子,Apache會按負載因子的比例向後端tomcat節點轉發請求,負載因子越大,對應的tomcat服務器就會處理越多的請求,如兩個tomcat都是1,Apache就按1:1的比例轉發,如果是2和1就按2:1的比例轉發。route參數對應後續tomcat配置中的引擎路徑(jvmRoute)。
重啓Apache服務,如果此時訪問http://localhost/將會返回503錯誤,打開剛纔配置的錯誤日誌logs/lbtest-error.log,可以看到錯誤原因是因爲後臺服務器沒有響應,因爲此時tomcat尚未配置和啓動。
四、Tomcat配置
如果僅僅爲了配置一個可用的集羣,Tomcat的配置將會非常簡單。分別打開t1和t2的server.xml配置文件,對於t1,儘量採用默認的設置,而對t2作較大改動以避免與t1衝突。如果t2和t1不在同一臺服務器上運行,對於端口就不需做改動。
首先是配置關閉端口,找到,t1不變,把t2改爲9005。
下面配置Connector的端口,找到non-SSL HTTP/1.1 Connector,即tomcat單獨工作時的默認Connector,保留t1默認配置,在8080端口偵聽,而把t2設置爲在9080端口偵聽。
往下找到AJP 1.3 Connector,,這是tomcat接收從Apache過來的ajp連接請求時使用的端口,保留t1默認設置,把t2端口改爲9009。注意,這裏的端口對應Apache httpd.conf中BalancerMember中配置的ajp連接端口。
繼續向下配置引擎,找到,去掉這段或改爲註釋,把上方緊挨的註釋符去掉,對於t2,去掉註釋符並把jvm1改爲jvm2。這裏的jvmRoute對應Apache httpd.conf中BalancerMember中配置的route參數。
向下找到,打開註釋,這裏的配置是爲了可以在集羣中的所有tomcat節點間共享會話(Session)。如果僅僅爲了獲得一個可用的tomcat集羣,Cluster只需要這麼配置就可以了,對於更多的Cluster配置筆者將另文解釋。
server.xml的配置修改完畢,下一步需要對具體的應用進行配置。在webapps目錄下新建test目錄,在test目錄下新建test.jsp文件,代碼如下:
- <%@ page contentType="text/html; charset=GBK" %>
- <%@ page import="java.util.*" %>
- <html><head><title>Cluster App Test</title></head>
- <body>
- Server Info:
- <%
- out.println(request.getLocalAddr() + " : " + request.getLocalPort()+"<br>");%>
- <%
- out.println("<br> ID " + session.getId()+"<br>");
- String dataName = request.getParameter("dataName");
- if (dataName != null && dataName.length() > 0) {
- String dataValue = request.getParameter("dataValue");
- session.setAttribute(dataName, dataValue);
- }
- out.print("<b>Session 列表</b>");
- Enumeration e = session.getAttributeNames();
- while (e.hasMoreElements()) {
- String name = (String)e.nextElement();
- String value = session.getAttribute(name).toString();
- out.println( name + " = " + value+"<br>");
- System.out.println( name + " = " + value);
- }
- %>
- <form action="test.jsp" method="POST">
- 名稱:<input type=text size=20 name="dataName">
- <br>
- 值:<input type=text size=20 name="dataValue">
- <br>
- <input type=submit>
- </form>
- </body>
- </html>
在test目錄下繼續新建WEB-INF目錄和web.xml,在節點下加入
<web-app xmlns="http://java.sun.com/xml/ns/j2ee" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://java.sun.com/xml/ns/j2ee http://java.sun.com/xml/ns/j2ee/web-app_2_4.xsd" version="2.4">
<display-name>TomcatDemo</display-name>
<distributable/>
</web-app>
這一步非常重要,是爲了通知tomcat服務器,當前應用需要在集羣中的所有節點間實現Session共享。如果tomcat中的所有應用都需要Session共享,也 可以把conf/context.xml中的<Context>改爲<Context distributable="true">
這樣就不需對所有應用的web.xml再進行單獨配置。
啓動t1,待t1啓動完成後再啓動t2。再次訪問http://localhost,可以看到小貓頁面。訪問http://localhost/test/test.jsp。可以看到包括服務器地址,端口,sessionid等信息在內的頁面。
注意這裏的sessionid,與平常的sessionid相比多了小數點和後面的部分,這裏的jvm1即處理當前請求tomcat服務器的jvmRoute,通過這裏可以知道是集羣中的哪一個服務器處理了當前請求。在文本框中輸入名稱和值,點擊按鈕,信息就保存到了Session中,並且顯示到頁面上。不斷點擊按鈕,可以發現輸入的信息並未丟失,而且sessionid小數點之前的部分保持不變,而小數點後面的字符不停的變化,表明是由不同的tomcat服務器處理了這些請求。這樣就實現了負載均衡,並且集羣中的不同節點間可以實現會話的共享。此時如果停止一個tomcat服務器t2,Apache將會自動把後續請求轉發到集羣中的其他服務器即t1。重啓t2後,Apache會自動偵測到t2的狀態爲可用,然後會繼續在t1和t2間進行負載均衡。
如果需要向集羣中增加節點,首先需要對tomcat作類似配置,然後修改Apache httpd.conf,增加BalancerMember,指向新增的tomcat即可。