使用Apache做集群及负载均衡的方式一般有两种:mod_jk和mod_proxy两种。
本人尝试过用mod_jk的方式配置过,但都不是很成功,apache2.2.x后已经将mod_proxy集成进来,无需使用其他软件、插件,通过配置就可以完成与tomcat的集成。下面讲述以mod_proxy方式配置情况:
环境:windowsxp,apache2.2.x,tomcat5.5,jdk1.5.0,tomcat放在同一台机器上,3份。
安装过程略。。。,以下讲述配置过程
1、Apache配置
1.1 httpd.conf配置
修改APACHE的配置文件D:\Apache \conf\httpd.conf
将以下Module的注释去掉,这里并没有使用mod_jk.so进行apache和tomcat的链接,从2.X以后apache自身已集成了mod_jk.so的功能。只需简单的把下面几行去掉注释,就相当于以前用mod_jk.so比较繁琐的配置了。这里主要采用了代理的方法,就这么简单。
- LoadModule proxy_module modules/mod_proxy.so
- LoadModule proxy_connect_module modules/mod_proxy_connect.so
- LoadModule proxy_ftp_module modules/mod_proxy_ftp.so
- LoadModule proxy_http_module modules/mod_proxy_http.so
- LoadModule proxy_ajp_module modules/mod_proxy_ajp.so
- LoadModule proxy_balancer_module modules/mod_proxy_balancer.so
LoadModule proxy_module modules/mod_proxy.so
LoadModule proxy_connect_module modules/mod_proxy_connect.so
LoadModule proxy_ftp_module modules/mod_proxy_ftp.so
LoadModule proxy_http_module modules/mod_proxy_http.so
LoadModule proxy_ajp_module modules/mod_proxy_ajp.so
LoadModule proxy_balancer_module modules/mod_proxy_balancer.so
再找到加上index.jsp修改成,我项目的默认欢迎页面是index.jsp,记得与前一个之前用空隔分隔。
- <IfModule dir_module>
- DirectoryIndex index.html index.jsp main.html
- </IfModule>
<IfModule dir_module>
DirectoryIndex index.html index.jsp main.html
</IfModule>
接着找到以下这两行,把下面一行的#号去掉,表示将 conf/extra/httpd-vhosts.conf配置文件加进来
- # Virtual hosts
- Include conf/extra/httpd-vhosts.conf
# Virtual hosts
Include conf/extra/httpd-vhosts.conf
最后,在文件最后加上以下内容,表示打开反向代理。 这个很重要,我的项目之前就是没有加上这几行,只能显示index.jsp页面的内容,登录成功后去不能正确跳转到相关页面,还是返回到index.jsp页面。反向代理可以基于一整个站点,也可以基于一个目录。
- ProxyRequests Off
- <Proxy *:80>
- Order deny,allow
- Allow from all
- </Proxy>
ProxyRequests Off
<Proxy *:80>
Order deny,allow
Allow from all
</Proxy>
2.2 http-vhost.conf配置
修改conf/extra/httpd-vhosts.conf
在文件最后加上以下代码
- <VirtualHost *:80>
- ServerAdmin habibliu@gmail.com
- ServerName localhost
- ServerAlias localhost
- ProxyPass / balancer://cluster/ stickysession=JSESSIONID|jsessionid nofailover=On
- ProxyPassReverse / balancer://cluster/
- <proxy balancer://cluster>
- BalancerMember ajp://127.0.0.1:8009 loadfactor=1 route=s1
- BalancerMember ajp://127.0.0.1:8109 loadfactor=1 route=s2
- BalancerMember ajp://127.0.0.1:8209 loadfactor=1 route=s3
- </proxy>
- </VirtualHost>
<VirtualHost *:80>
ServerAdmin habibliu@gmail.com
ServerName localhost
ServerAlias localhost
ProxyPass / balancer://cluster/ stickysession=JSESSIONID|jsessionid nofailover=On
ProxyPassReverse / balancer://cluster/
<proxy balancer://cluster>
BalancerMember ajp://127.0.0.1:8009 loadfactor=1 route=s1
BalancerMember ajp://127.0.0.1:8109 loadfactor=1 route=s2
BalancerMember ajp://127.0.0.1:8209 loadfactor=1 route=s3
</proxy>
</VirtualHost>
说明:
均衡器粘连会话名称。该值常常会被设置为类似JSESSIONID或者PHPSESSIONID之类的值,他依赖于支持会话的后端应用服务器。如果后端服务器使用不同的cookie名称或者URL编码的ID(像servlet容器),使用|来分开他们。第一个部分针对cookie,第二个针对路径。
每次请求都按照负载均衡配置的节点次序依次请求到不同的Tomcat上。尤其是当我们通过jvmRoute 和route 做了绑定之后,信息更加准确。但是,仔细观察,每次请求的SessionID都是不一样! 对于纯Web应用,尤其是依靠SessionID区分唯一用户的应用,这将是一场噩梦——解决了服务器压力均衡问题,却带来了SessionID不唯一问题!这就需要SessionID绑定,或者说叫做“会话复制”。 stickySession 粘性会话,根据这一属性,浏览器将通过cookie绑定SeesionID。如果这个时候再次访问http://localhost/zlex ,你会发现,页面不会来回跳转了!
引用:
sticky模式
利用负载均衡器的sticky模式的方式把所有同一session的请求都发送到相同的Tomcat节点。这样不同用户的请求就被平均分配到集群 中各个tomcat节点上,实现负载均衡的能力。这样做的缺点是没有灾难恢复的能力。一旦一个节点发生故障,这个节点上所有的session信息全部丢 失;
同一用户同一session只和一个webServer交互,一旦这个webserver发生故障,本次session将丢失,用户不能继续使用 !
BalancerMember 是负载均衡参与的成员定义,与tomcat的ajp协议通讯。上面红色的端口号分别是三个tomcat的conf/server.xml中的配置的AJP/1.3协议连接器,由于在同一台机器上部署,所以三个tomcat中的这个端口都要改成不一样的,我这里分别改成8009,8109,8209。紧接着是route设置,值与每个tomcat的配置对应上,下面会说明。
2、Tomcat的配置说明
1、server.xml配置
修改%TOMCAT_HOME%\conf\server.xml
由于三个tomcat都部署在一台机器上,所以相关会引起冲突的端口都要改,分别是:
shutdow,http connector,ajp connector,以下是三个tomcat server.xml文件中三个端口的配置清单:
tomcat s1:
- <Server port="8905" shutdown="SHUTDOWN" debug="0">
- ....
- <Connector port="9000"
- maxThreads="150" minSpareThreads="25" maxSpareThreads="75"
- enableLookups="false" redirectPort="8443" acceptCount="100"
- debug="0" connectionTimeout="20000"
- disableUploadTimeout="true" />
- ....
- <Connector port="8009"
- enableLookups="false" redirectPort="8443" debug="0"
- protocol="AJP/1.3" />
<Server port="8905" shutdown="SHUTDOWN" debug="0">
....
<Connector port="9000"
maxThreads="150" minSpareThreads="25" maxSpareThreads="75"
enableLookups="false" redirectPort="8443" acceptCount="100"
debug="0" connectionTimeout="20000"
disableUploadTimeout="true" />
....
<Connector port="8009"
enableLookups="false" redirectPort="8443" debug="0"
protocol="AJP/1.3" />
Tomcat s2
- <Server port="8915" shutdown="SHUTDOWN" debug="0">
- ....
- <Connector port="9100"
- maxThreads="150" minSpareThreads="25" maxSpareThreads="75"
- enableLookups="false" redirectPort="8443" acceptCount="100"
- debug="0" connectionTimeout="20000"
- disableUploadTimeout="true" />
- ....
- <Connector port="8109"
- enableLookups="false" redirectPort="8443" debug="0"
- protocol="AJP/1.3" />
<Server port="8915" shutdown="SHUTDOWN" debug="0">
....
<Connector port="9100"
maxThreads="150" minSpareThreads="25" maxSpareThreads="75"
enableLookups="false" redirectPort="8443" acceptCount="100"
debug="0" connectionTimeout="20000"
disableUploadTimeout="true" />
....
<Connector port="8109"
enableLookups="false" redirectPort="8443" debug="0"
protocol="AJP/1.3" />
Tomcat s3
- <Server port="8925" shutdown="SHUTDOWN" debug="0">
- ....
- <Connector port="9200"
- maxThreads="150" minSpareThreads="25" maxSpareThreads="75"
- enableLookups="false" redirectPort="8443" acceptCount="100"
- debug="0" connectionTimeout="20000"
- disableUploadTimeout="true" />
- ....
- <Connector port="8209"
- enableLookups="false" redirectPort="8443" debug="0"
- protocol="AJP/1.3" />
<Server port="8925" shutdown="SHUTDOWN" debug="0">
....
<Connector port="9200"
maxThreads="150" minSpareThreads="25" maxSpareThreads="75"
enableLookups="false" redirectPort="8443" acceptCount="100"
debug="0" connectionTimeout="20000"
disableUploadTimeout="true" />
....
<Connector port="8209"
enableLookups="false" redirectPort="8443" debug="0"
protocol="AJP/1.3" />
以上的AJP端口与apache http-vhost.conf中的BalancerMember 的ajp端口对应。
接着找到的,加上jvmRoute="xx"属性,xx要与apache http-vhost.conf中的BalancerMember 的ajp route定义一致。以下是三个tomcat的engine设置
Tomcat s1
- <Engine name="Catalina" defaultHost="localhost" debug="0" jvmRoute="s1">
<Engine name="Catalina" defaultHost="localhost" debug="0" jvmRoute="s1">
Tomcat s2
- <Engine name="Catalina" defaultHost="localhost" debug="0" jvmRoute="s2">
<Engine name="Catalina" defaultHost="localhost" debug="0" jvmRoute="s2">
Tomcat s3
- <Engine name="Catalina" defaultHost="localhost" debug="0" jvmRoute="s3">
<Engine name="Catalina" defaultHost="localhost" debug="0" jvmRoute="s3">
接着到到Cluster配置段,将这一段的注释符号去掉,如下:
- <Cluster className="org.apache.catalina.cluster.tcp.SimpleTcpCluster"
- managerClassName="org.apache.catalina.cluster.session.DeltaManager"
- expireSessionsOnShutdown="false"
- useDirtyFlag="true">
-
- <Membership
- className="org.apache.catalina.cluster.mcast.McastService"
- mcastAddr="228.0.0.4"
- mcastPort="45564"
- mcastFrequency="500"
- mcastDropTime="3000"/>
-
- <Receiver
- className="org.apache.catalina.cluster.tcp.ReplicationListener"
- tcpListenAddress="auto"
- tcpListenPort="4001"
- tcpSelectorTimeout="100"
- tcpThreadCount="6"/>
-
- <Sender
- className="org.apache.catalina.cluster.tcp.ReplicationTransmitter"
- replicationMode="pooled"/>
-
- <Valve className="org.apache.catalina.cluster.tcp.ReplicationValve"
- filter=".*\.gif;.*\.js;.*\.jpg;.*\.htm;.*\.html;.*\.txt;"/>
-
- <Deployer className="org.apache.catalina.cluster.deploy.FarmWarDeployer"
- tempDir="/tmp/war-temp/"
- deployDir="/tmp/war-deploy/"
- watchDir="/tmp/war-listen/"
- watchEnabled="false"/>
- </Cluster>
<Cluster className="org.apache.catalina.cluster.tcp.SimpleTcpCluster"
managerClassName="org.apache.catalina.cluster.session.DeltaManager"
expireSessionsOnShutdown="false"
useDirtyFlag="true">
<Membership
className="org.apache.catalina.cluster.mcast.McastService"
mcastAddr="228.0.0.4"
mcastPort="45564"
mcastFrequency="500"
mcastDropTime="3000"/>
<Receiver
className="org.apache.catalina.cluster.tcp.ReplicationListener"
tcpListenAddress="auto"
tcpListenPort="4001"
tcpSelectorTimeout="100"
tcpThreadCount="6"/>
<Sender
className="org.apache.catalina.cluster.tcp.ReplicationTransmitter"
replicationMode="pooled"/>
<Valve className="org.apache.catalina.cluster.tcp.ReplicationValve"
filter=".*\.gif;.*\.js;.*\.jpg;.*\.htm;.*\.html;.*\.txt;"/>
<Deployer className="org.apache.catalina.cluster.deploy.FarmWarDeployer"
tempDir="/tmp/war-temp/"
deployDir="/tmp/war-deploy/"
watchDir="/tmp/war-listen/"
watchEnabled="false"/>
</Cluster>
注意:如果同一台设备上有多个tomcat,这个tcpListenPort就中设置不同的端口号,以免冲突。
所以三个tomcat的这个端口分别是4001、4002、4003。
3、其它配置
执行以上步骤基本已经可以成功了,当然还要设置你的webapp,这个不在此累赘了。当然最好还要设置JAVA_HOME,PATH,CLASSPATH这些环境变量,比如将%JAVA_HOME%\lib\tools.jar和%JAVA_HOME%\lib\rt.jar两个包加到类路径内。
还有<distributable/>元素,有些文章说还要将元素加到项目的web.xml文件中,我也加了,但没有验证它的存在对运行有没有影响,大家如果碰到问题,也不防加上。
</script>