基于apache的tomcat负载均衡和集群配置

基于apache的tomcat负载均衡和集群配置

1】 下载安装

       httpd-2.2.15-win32-x86-no_ssl.msi    网页服务器

       32-bit Windows zip                            tomcat

       mod_jk-1.2.30-httpd-2.2.3.so             Apache/IIS 用来连接后台Tomcat的模块，支持集群和负载均衡

       JK 分为两个版本 1,x 和 2.x ，其中 2.x 并不是最新的版本，它是 JK 的另外一个分支，后不知何因没有继续开发，因此2.x 版本已经废弃

       安装httpd-2.2.15-win32-x86-no_ssl.msi 到指定目录，我安装的是C:\Program Files\Apache2.2，以后这个目录将用Apache_Home代替

       安装tomcat，我是将两个tomcat进行集群，所以安装两个tomcat，路径分别为：F:\tomcat\tomcat1，F:\tomcat\tomcat2，以后这两个目录将用tomcat1_Home,tomcat2_Home代替

2】 配置Apache_Home\conf\httpd.conf

      在httpd.conf文件的最后一行写入include "C:\Program Files\Apache2.2\conf\mod_jk.conf"

3】 配置mod_jk.conf文件

      在Apache_Home\conf下建立mod_jk.conf文件

      配置内容：

      #加载mod_jk Module
         LoadModule jk_module modules/mod_jk-1.2.30-httpd-2.2.3.so

         将下载的 mod_jk-1.2.30-httpd-2.2.3.so 文件放入到Apache_Home\modules下
      # 配置 mod_jk
      #加载集群中的workers
         JkWorkersFile conf/workers.properties
      #加载workers的请求处理分配文件
         JkMountFile conf/uriworkermap.properties
      #指定jk的日志输出文件
         JkLogFile logs/mod_jk.log
      #指定日志级别
         JkLogLevel warn
     #指定哪些请求交给tomcat处理,"controller"为在 workers.propertise里指定的负载分配控制器名
         JkMount /* controller

4】  配置workers.propertise文件

       在Apache_Home\conf下建立workers.propertise文件

       配置内容：

       #server 列表
         worker.list=controller,tomcat1,tomcat2
      #========tomcat1========
      #ajp13 端口号，在tomcat下server.xml配置,默认8009
        worker.tomcat1.port=8009
      #tomcat的主机地址，如不为本机，请填写ip地址
        worker.tomcat1.host=localhost
        worker.tomcat1.type=ajp13
     #server的加权比重，值越高，分得的请求越多
        worker.tomcat1.lbfactor=1
     #========tomcat2========
     #ajp13 端口号，在tomcat下server.xml配置,默认8009
       worker.tomcat2.port=9009
     #tomcat的主机地址，如不为本机，请填写ip地址
      worker.tomcat2.host=localhost
      worker.tomcat2.type=ajp13
    #server的加权比重，值越高，分得的请求越多
       worker.tomcat2.lbfactor=1
    #========controller,负载均衡控制器========
    #server名为controller,用于负载均衡
      worker.controller.type=lb
   #重试次数
      worker.retries=3
   #指定分担请求的tomcat
     worker.controller.balanced_workers=tomcat1,tomcat2
   #粘性Session(默认是打开的) 当该属性值=True（或1）时，代表Session是粘性的，即同一Session在集群中的同一个节点上处理，Session不跨越节点。在集群环境中，一般将该值设置为False
     worker.controller.sticky_session=false
  #设置用于负载均衡的server的session可否共享 有不少文章说设置为1是可以的，也有设置为0才可以的
     worker.controller.sticky_session=1
  #worker.controller.sticky_session_force=1
  #worker.status.type=status

5】 配置uriworkermap.properties文件

      在Apache_Home\conf下建立uriworkermap.properties文件

      配置内容：

     #所有请求都由controller这个server处理
     /*=controller
     #所有包含jkstatus请求的都由status这个 server处理
     #/jkstatus=status
     #这里的"!”是“非”的意思。
     !/*.gif=controller
     !/*.jpg=controller
     !/*.png=controller
     !/*.css=controller
     !/*.js=controller
     !/*.htm=controller
     !/*.html=controller

6】修改tomcat1_Home\conf\server.xml配置

      Starting Coyote HTTP/1.1 on http-8081 默认端口为8080，修改为8081

     <Connector port="8081" protocol="HTTP/1.1"
               connectionTimeout="20000"
               redirectPort="8443" />

      JK: ajp13 listening on /0.0.0.0:8009 修改端口必须与workers.propertise文件内worker.tomcat1.port=8009一致

     <Connector port="8009" protocol="AJP/1.3" redirectPort="8443" />

     需要添加的内容：

    <Engine name="Catalina" defaultHost="localhost" jvmRoute="tomcat2">   <!--tomcat1将与tomcat2黏贴session 在这里指定黏贴对象-->

      <!--For clustering, please take a look at documentation at:
          /docs/cluster-howto.html  (simple how to)
          /docs/config/cluster.html (reference documentation) -->
      <Cluster className="org.apache.catalina.ha.tcp.SimpleTcpCluster"
                 channelSendOptions="8">

          <Manager className="org.apache.catalina.ha.session.DeltaManager"
                   expireSessionsOnShutdown="false"
                   notifyListenersOnReplication="true"/>

          <Channel className="org.apache.catalina.tribes.group.GroupChannel">
            <Membership className="org.apache.catalina.tribes.membership.McastService"
                        address="228.0.0.4"
                        port="45564"
                        frequency="500"
                        dropTime="3000"/>
            <Receiver className="org.apache.catalina.tribes.transport.nio.NioReceiver"
                      address="auto"
                      port="4000"  
                      autoBind="100"
                      selectorTimeout="5000"
                      maxThreads="6"/>

            <Sender className="org.apache.catalina.tribes.transport.ReplicationTransmitter">
              <Transport className="org.apache.catalina.tribes.transport.nio.PooledParallelSender"/>
            </Sender>
            <Interceptor className="org.apache.catalina.tribes.group.interceptors.TcpFailureDetector"/>
            <Interceptor className="org.apache.catalina.tribes.group.interceptors.MessageDispatch15Interceptor"/>
          </Channel>

          <Valve className="org.apache.catalina.ha.tcp.ReplicationValve"
                 filter=""/>
          <Valve className="org.apache.catalina.ha.session.JvmRouteBinderValve"/>

          <!-- <Deployer className="org.apache.catalina.ha.deploy.FarmWarDeployer"
                    tempDir="/tmp/war-temp/"
                    deployDir="/tmp/war-deploy/"
                    watchDir="/tmp/war-listen/"
                    watchEnabled="false"/> -->

          <ClusterListener className="org.apache.catalina.ha.session.JvmRouteSessionIDBinderListener"/>
          <ClusterListener className="org.apache.catalina.ha.session.ClusterSessionListener"/>
        </Cluster>   

      上面部分如果需要详细的说明可以看webapps\docs\cluster-howto.html

7】修改tomcat2_Home\conf\server.xml配置

      Starting Coyote HTTP/1.1 on http-8082 默认端口为8080，修改为8082

     <Connector port="8082" protocol="HTTP/1.1"
               connectionTimeout="20000"
               redirectPort="8443" />

      JK: ajp13 listening on /0.0.0.0:9009 修改端口必须与workers.propertise文件内worker.tomcat2.port=9009一致

     <Connector port="9009" protocol="AJP/1.3" redirectPort="8443" />

     需要添加的内容：

    <Engine name="Catalina" defaultHost="localhost" jvmRoute="tomcat1">   <!--tomcat2将与tomcat1黏贴session 在这里指定黏贴对象-->

      <!--For clustering, please take a look at documentation at:
          /docs/cluster-howto.html  (simple how to)
          /docs/config/cluster.html (reference documentation) -->
      <Cluster className="org.apache.catalina.ha.tcp.SimpleTcpCluster"
                 channelSendOptions="8">

          <Manager className="org.apache.catalina.ha.session.DeltaManager"
                   expireSessionsOnShutdown="false"
                   notifyListenersOnReplication="true"/>

          <Channel className="org.apache.catalina.tribes.group.GroupChannel">
            <Membership className="org.apache.catalina.tribes.membership.McastService"
                        address="228.0.0.4"
                        port="45564"
                        frequency="500"
                        dropTime="3000"/>
            <Receiver className="org.apache.catalina.tribes.transport.nio.NioReceiver"
                      address="auto"
                      port="4001"  
                      autoBind="100"
                      selectorTimeout="5000"
                      maxThreads="6"/>

            <Sender className="org.apache.catalina.tribes.transport.ReplicationTransmitter">
              <Transport className="org.apache.catalina.tribes.transport.nio.PooledParallelSender"/>
            </Sender>
            <Interceptor className="org.apache.catalina.tribes.group.interceptors.TcpFailureDetector"/>
            <Interceptor className="org.apache.catalina.tribes.group.interceptors.MessageDispatch15Interceptor"/>
          </Channel>

          <Valve className="org.apache.catalina.ha.tcp.ReplicationValve"
                 filter=""/>
          <Valve className="org.apache.catalina.ha.session.JvmRouteBinderValve"/>

          <!-- <Deployer className="org.apache.catalina.ha.deploy.FarmWarDeployer"
                    tempDir="/tmp/war-temp/"
                    deployDir="/tmp/war-deploy/"
                    watchDir="/tmp/war-listen/"
                    watchEnabled="false"/> -->

          <ClusterListener className="org.apache.catalina.ha.session.JvmRouteSessionIDBinderListener"/>
          <ClusterListener className="org.apache.catalina.ha.session.ClusterSessionListener"/>
        </Cluster>   

      上面部分如果需要详细的说明可以看webapps\docs\cluster-howto.html

8】session黏贴（共享）方面，如果session中存放的为javabean，javabean必须实现Serializable接口，如果没有实现会报错误 Exception thrown: class java.lang.IllegalArgumentException

9】补充：

 

      看到jameswxx的回复发现确实有欠妥的地方，现在进行改正

      在工程的web.xml文件内加入 <distributable/>    标签

      标题名不够准确，将原名称“tomcat集群配置流程”更正为“基于apache的tomcat负载均衡和集群配置”

 

 

 

 

 

 

评论

24 楼 coffeesweet 2010-05-27  

讲的确实很详细，不知道楼主配没配过iis+tomcat的?

23 楼 newwpp 2010-05-27  

Thank you lz

22 楼 mshy 2010-05-27  

jerry.yan.mj 写道

我不是这方面的专家，可是mod好像很就了吧。

能不能给个理由不用reverse proxy呢？

Reverse proxy主要用作以下用途：
1．安全性：reverse proxy隐藏了真实web server的IP地址，用户无法直接访问web server，从而保证了web servers上数据的安全。同时也提供了更换web server的灵活性，如果web server的host name改变，则只需更改reverse proxy上的mapping rule即可，在客户端无需任何设置；
2．加密/SSL连接：使用reverse proxy可以做HTTP到HTTPS的转换，也可以从HTTPS转换到HTTP。有时web server本身不设置HTTPS加密，加密的步骤在reverse proxy上完成，这样reverse proxy便有机会针对SSL进行一定的优化，从而得到整体性能上的提高；
3．负载均衡：reverse proxy可以将不同的URL请求分配给不同的后台server，增加新的server也不必关闭整个网站；
4．缓存：可以在reverse proxy中存储静态资源，减少实际server的访问量，提高性能。

总的来说，proxy server最大的好处还是安全性。比如forward proxy隐藏了用户的IP，保证了用户机器的安全，reverse proxy隐藏了web server的IP，保证了web server的安全。还有少数情况下，reverse proxy被赋予某些特殊的用途，比如Authentication。在SAP Enterprise Portal (EP) 中，如果要使用微软专有的验证方式比如NTLM 或者Kerberos，则必须使用IIS作为reverse proxy，并且配置SAP专有的ISAPI filter才行。

目前，主流的web server和proxy server如Apache, IIS, MS ISA都支持reverse proxy功能。

21 楼 jerry.yan.mj 2010-05-27  

我不是这方面的专家，可是mod好像很就了吧。

能不能给个理由不用reverse proxy呢？

20 楼 xx521 2010-05-27  

好玩意儿，但是我以前作的是linux 上的




久久资讯

19 楼 heyjava 2010-05-26  

看到一堆马甲自顶自己文章...无聊

18 楼 lzstone 2010-05-26  

crazybull 写道

JK已不再维护，为何还用JK？
为何不直接用apache自带的mod？

不在维护更新的是2.x版本，1.x版本还是在更新，最新版本是26 February 2010 - JK-1.2.30 released ，JK自认为很稳定，对mod不是很了解，不能发表对mod的意见

17 楼 crazybull 2010-05-26  

JK已不再维护，为何还用JK？
为何不直接用apache自带的mod？

16 楼 lzstone 2010-05-26  

jameswxx 写道

楼主，你要说清楚负载均衡和集群，如果仅配置集群，只需要将tomcat的cluster标签注释去掉，不需要apache的转发，另外，应用的web.xml还要加上distributable标签，集群是集群，负载均衡是负载均衡，这是两码事，别误导新人了，你这个标题应该叫“基于apache的tomcat负载均衡和集群配置”

你的意见我完全接受，很久之前配置的，今天想起来整理一下，确实把web.xml的配置疏忽掉了，标题确实只包含部分内容，我已经进行修改！ 

15 楼 jameswxx 2010-05-26  

楼主，你要说清楚负载均衡和集群，如果仅配置集群，只需要将tomcat的cluster标签注释去掉，不需要apache的转发，另外，应用的web.xml还要加上distributable标签，集群是集群，负载均衡是负载均衡，这是两码事，别误导新人了，你这个标题应该叫“基于apache的tomcat负载均衡和集群配置”

14 楼 25262875 2010-05-26  

huatu122 写道

take 写道

huatu122 写道

老东西了，前几年就会了

看来这位是个鼻祖级人物啊.!

鼻祖不敢，apache官方文档写的比这个还要清楚

皮痒了，专业找攻击的。。哎。

13 楼 dsea 2010-05-26  

huatu122 写道

老东西了，前几年就会了

怎么不见你贴出来?

12 楼 huatu122 2010-05-26  

take 写道

huatu122 写道

老东西了，前几年就会了

看来这位是个鼻祖级人物啊.!

鼻祖不敢，apache官方文档写的比这个还要清楚

11 楼 msi110 2010-05-26  

由于配置过程比较复杂，一直都没耐心好好的配一下..........所以辛苦楼主了！

10 楼 take 2010-05-26  

huatu122 写道

老东西了，前几年就会了

看来这位是个鼻祖级人物啊.!

9 楼 lzstone 2010-05-26  

huatu122 写道

老东西了，前几年就会了

确实是老东西了，但是总是会有新人来学习的，只是把配置流程帖出来大家分享一下

8 楼 huatu122 2010-05-26  

老东西了，前几年就会了

7 楼 xl5550 2010-05-26  

不错不错 写的很详细~

6 楼 anry513 2010-05-26  

厉害，虽然配了几次，但像楼主这样整理出来的 真太伟大了

5 楼 lzstone 2010-05-26  

wangyetao 写道

还没时间试一试，如果好用那楼主很厉害啊

每一步我都进行测试过，是好用，如果你在配置过程中出现问题，我们可以讨论解决方法