Tomcat叢集配置學習篇-----分散式應用

現目前基於javaWeb開發的應用系統已經比比皆是，尤其是電子商務網站，要想網站發展壯大，那麼必然就得能夠承受住龐大的網站訪問量；大家知道如果伺服器訪問量過大，就會出現服應用務器崩潰的情況，這個時候怎麼辦，難道就只能去重啟伺服器嗎？好，如果是一般的小型公益網站到也無所謂，但如果是比如像大型航空公司售票等電子商務網站，每天每小時都有大量的訂單業務，如果這些售票系統一旦崩潰後，再去重啟，這些時間和客戶的損失就直接會影響到航空公司的利益，這些損失如何去避免呢。

別擔心，不管是目前IBM的webSphere還是大眾化的tomcat伺服器，都為我們提供了一種通用的解決方式，就是多臺伺服器來分擔訪問量，這樣在一個伺服器上的壓力就會減小很多，你可以根據自己的需求去配置任意多的伺服器來支撐你的應用系統，如果一臺服務崩潰了，那麼另外的應用伺服器依然可以繼續支援應用繼續服務。多應用伺服器的簡單流程圖大致如下：

為了實現這個原理我們就需要解決兩個問題：

1：如何實現多應用伺服器間的session共享：（一臺伺服器崩潰，另外一臺伺服器可以繼續支援）

2：如何分發請求到各個應用伺服器實現壓力分解：（這裡的解決方案是用apache做 web伺服器）

下面我們就是實際行動來看看如何實現這種實現。

環境配置：

App應用伺服器apache-tomcat-7.0.52-1 

web伺服器：apache的apache 2.0.55

java環境：jdk1.6

系統環境：winxp系統

1) web伺服器配置

首先安裝apache的web伺服器：

apache伺服器和tomcat的連線方法其實有三種:mod_JK、

http_proxy和ajp_proxy。

一：軟體環境
   1. Apache: apache 2.0.55 (由http://httpd.apache.org/進入下載)(點選下載apache 2.0.55)
   2. Tomcat: apache-tomcat-7.0.52-1
   3. mod_jk: 在頁面 http://tomcat.apache.org/   Download 標題下找到 Tomcat Connectors 連結進入(點選下載mod_jk-apache-2.0.55.so)，看起來像是個Unix/Linux下的動態庫，實際應是個Win32 的 DLL 動態庫，大概是為保持不同平臺配置的一致性，才用了這個副檔名。

二：負載均衡
　用Apache進行分流，把請求按照權重以及當時負荷分tomcat1,tomcat2...去處理

1. 安裝apache,tomcat
   我把Apache安裝在D:/Apache Group/Apache2
　 解壓兩分Tomcat, 分別在 D:/Apache Group/apache-tomcat-7.0.52-1，D:/Apache Group/apache-tomcat-7.0.52-1

2.修改Apache配置檔案http.conf

   在apache安裝目錄下conf目錄中找到http.conf，在檔案最後加上下面一句話就可以了

   include conf/mod_jk.conf

3. http.conf 同目錄下新建mod_jk.conf檔案，內容如下

#載入mod_jk Module   
LoadModule jk_module modules/mod_jk-apache-2.0.55.so   
  
#指定 workers.properties檔案路徑   
JkWorkersFile conf/workers.properties   
  
#指定那些請求交給tomcat處理,"controller"為在workers.propertise裡指定的負載分配控制器   
JkMount /*.jsp controller  

如果還要指定*.do也進行分流就再加一行
JkMount /*.do controller

如果你想對所有的請求進行分流只需要寫成
JkMount /* controller

4. 在http.conf同目錄下新建 workers.properties檔案

worker.list = controller,tomcat1,tomcat2  #server 列表    
#========tomcat1========    
worker.tomcat1.port=8019       #ajp13 埠號，在tomcat下server.xml配置,預設8009    
worker.tomcat1.host=localhost  #tomcat的主機地址，如不為本機，請填寫ip地址    
worker.tomcat1.type=ajp13    
worker.tomcat1.lbfactor = 1    #server的加權比重，值越高，分得的請求越多    
   
#========tomcat2========    
worker.tomcat2.port=8029       #ajp13 埠號，在tomcat下server.xml配置,預設8009    
worker.tomcat2.host=localhost  #tomcat的主機地址，如不為本機，請填寫ip地址    
worker.tomcat2.type=ajp13    
worker.tomcat2.lbfactor = 2    #server的加權比重，值越高，分得的請求越多    
   
#========controller,負載均衡控制器========    
worker.controller.type=lb    
worker.controller.balanced_workers=tomcat1,tomcat2   #指定分擔請求的tomcat    
worker.controller.sticky_session=1

5. 修改tomcat配置檔案server.xml
如果你是水平叢集，即在不同電腦上安裝tomcat,tomcat的安裝數量為一個，可以不必修改tomcat配置檔案.我這裡是在同一臺電腦上安裝兩個tomcat,實現的是垂直叢集方式，所以必須修改其中一個的設定，以避免埠衝突，按照參考文章是把原來以9開頭的埠號改為以9開頭埠號，但是在我機器上如果以9開頭的埠號，例如9080、9082會與我的WebSphere Application Server配置衝突，所以我這裡採取的策略是把原來埠號的第三位改為1，如8080改為8180。

開啟tomcat2/conf/server.xml檔案

1) 將關閉Tomcat的監聽埠改成由8005改為8105
即把
 <Server port="8005" shutdown="SHUTDOWN">
改為
 <Server port="8105" shutdown="SHUTDOWN">

2) 把http服務埠號由8080改為8180
找到
 <!-- Define a non-SSL HTTP/1.1 Connector on port 8080 -->
    <CONNECTOR port="8080"
把這裡的8080改為8180

3) 把AJP埠號由8009改為8109
找到
 <!-- Define an AJP 1.3 Connector on port 8009 -->
    <CONNECTOR port="8009"
把這裡的8009改為8109

4) 把 HTTP 代理埠從8082改為8182(這個配置預設是被註釋掉的，可跳過這一步)
找到
<CONNECTOR port="8082"
把這裡的8082改為8182

5) 編寫一個測試 jsp
建立一個目錄TestCluster，裡面新建一個test.jsp,內容為

<% System.out.println("==========================="); %>
把TestCluster放到tomcat1,tomcat2的webapps下

6) 啟動apache,tomcat1,tomcat2,進行測試
通過 http://localhost/TestCluster/test.jsp 訪問，多重新整理幾次頁面，檢視Tomcat1和Tomcat2的視窗，你將可以看到列印了一行行"==========================="，並且從統計上來說，大約在tomcat2列印的數量是在Tomcat1中的兩倍，可以看到請求會被tomcat1,tomcat2按照不同的權重分流處理,實現了負載均衡。

作下面的叢集配置，請在workers.properties把tomcat1和tomcat2的權重改為一樣的，使請求較平均分配，將有便於看到實驗的效果。 

首先配置web應用伺服器配置tomcat-A配置

1：修改tomcat的server.xml檔案增加如下內容

 

貼出程式碼，方便複製：

<Cluster className="org.apache.catalina.ha.tcp.SimpleTcpCluster"  
                   channelSendOptions="6">  
      
            <Manager className="org.apache.catalina.ha.session.BackupManager"  
                     expireSessionsOnShutdown="false"  
                     notifyListenersOnReplication="true"  
                     mapSendOptions="6"/>   
            <Manager className="org.apache.catalina.ha.session.DeltaManager"  
                     expireSessionsOnShutdown="false"  
                     notifyListenersOnReplication="true"/>    
            <Channel className="org.apache.catalina.tribes.group.GroupChannel">  
              <Membership className="org.apache.catalina.tribes.membership.McastService"  
                          bind="127.0.0.1"  
                          address="228.0.0.4"  
                          port="45564"  
                          frequency="500"  
                          dropTime="3000"/>  
              <Receiver className="org.apache.catalina.tribes.transport.nio.NioReceiver"  
                        address="127.0.0.1"  
                        port="4001"  
                        selectorTimeout="100"  
                        maxThreads="6"/>  
      
              <Sender className="org.apache.catalina.tribes.transport.ReplicationTransmitter">  
                <Transport className="org.apache.catalina.tribes.transport.nio.PooledParallelSender"/>  
              </Sender>  
              <Interceptor className="org.apache.catalina.tribes.group.interceptors.TcpFailureDetector"/>  
              <Interceptor className="org.apache.catalina.tribes.group.interceptors.MessageDispatch15Interceptor"/>  
              <Interceptor className="org.apache.catalina.tribes.group.interceptors.ThroughputInterceptor"/>  
            </Channel>  
      
            <Valve className="org.apache.catalina.ha.tcp.ReplicationValve"  
                   filter=".*\.gif;.*\.js;.*\.jpg;.*\.png;.*\.htm;.*\.html;.*\.css;.*\.txt;"/>  
      
            <ClusterListener className="org.apache.catalina.ha.session.ClusterSessionListener"/>  
      </Cluster>  

備註：

1) App應用伺服器tomcat-B配置和tomcat-A基本相同，但需要注意的是兩臺伺服器如果在一個電腦上就需要注意埠的衝突問題，比如：tomcat-A的埠是8080，那麼tomcat-B就是8081或者其他，其他的以此類推

我這裡這裡的埠配置如下：

tomcat-1：serverport：8081   ajp/1.3connector：8019  <Server port="8015" shutdown="SHUTDOWN">

tomcat-2：serverport：8082   ajp/1.3connector：8029  <Server port="8025" shutdown="SHUTDOWN">

2) 然後就是新建一個web應用測試一下，在新建應用的web.xml裡面需要加上

<distributable/>

3) 到這裡就可以測試你的配置了，先啟動tomcat-1，然後啟動tomcat-2，如果你在兩個控制檯裡面看到類似的如下資訊

 

證明兩臺應用伺服器已經配置完成了。

4) 新建web應用，web.xml配置檔案裡面需要新增如下內容來配合實現session共享：

<distrbutable/>

然後將應用分別部署到兩臺伺服器，啟動兩臺應用伺服器進行測試：

注：由於jsp自帶session物件，所以在測試的時候最好把頁面自帶的session物件關閉後再測試，關閉程式碼<%@ page session="false"%>

Tomcat-A  index.jsp程式碼：

<body>

     This is my JSP page.tomcat-A <br>

     <%

HttpSession mysession = request.getSession(false);

if(mysession==null){

mysession = request.getSession(true);

mysession.setAttribute("appname","value-A");

out.println("new session:"+mysession.getId());

}else{

out.println("old session:"+mysession.getId());

}

out.println("appname="+mysession.getAttribute("appname"));

     %>

 </body>

Tomcat-B  index.jsp程式碼：

<body>

    This is my JSP page.tomcat-B<br>

    <%

HttpSession mysession = request.getSession(false);

if(mysession==null){

mysession = request.getSession(true);

mysession.setAttribute("appname","value-A");

out.println("new session:"+mysession.getId());

}else{

out.println("old session:"+mysession.getId());

}

out.println("appname="+mysession.getAttribute("appname"));

    %>

   </body>

訪問8081伺服器：

頁面重新整理後結果如下：

訪問8082伺服器：

頁面重新整理後結果如下：

到這裡tomcat伺服器就配置完成了，接下來就需要配置統一入口的負載均衡的web伺服器，這裡用的是apache 2.2.19（官網上可以直接下載）