apache, tomcat, jk2 세션 클러스터링 작업 문서정리
| apache, tomcat, jk2 세션 클러스터링 작업 문서정리 |
|
여기 저기 참고하면서 apache, tomcat, jk2를 이용한 환경 구축을 정리한
문서입니다.
관련 키워드로 검색하시면 다양한 정보를 얻을 수 있습니다. 키워드 : 아파치 로드밸런싱, jk2 커넥터, 세션복제, Web Farm |
본 문서는 Apache2, Tomcat5, JK2 를 이용한 세션 복제 클러스터링과 로드벨런싱 실제 구축 과정을 정리하였습니다. 다른 환경에서의 구축시 참조용으로 가능하나 모든 내용이 같을 수 없습니다.)
CentOS(linux)용 버전을 받아 사용 합니다.
jdk-1_5_0_21-linux-i586.bin
httpd-2.2.10.tar.gz
apache-tomcat-5.5.28.tar.gz
jakarta-tomcat-connectors-jk2-src-current.tar.tar
Apache2 + Tomcat 5 + JK2 를 사용한 로드밸런싱과 세션 복제 클러스터링 Web Farm 구성
Apache2 + Tomcat 5 + JK2 를 사용한 로드밸런싱과 세션 복제 클러스터링 Web Farm 구성
본 문서는 로드밸런싱과 클러스터링 구축 환경에 대한 이해와 실제 구축 과정을 담고 있습니다. 운용기 2대 Server에 각 Apache, JK2, Tomcat를 세팅하고 물리적으로 분리된 2대의 Server에서 부하분산과 세션복제가 되는 클러스터링 웹 팜을 구축하였습니다.
그림 1. 클러스터링 다이어그램
sticky session 메커니즘을 통한 클러스터링은 그림 1에서 보여지는 것과 같이 클러스터링을 구성하는 노드들 사이의 세션을 복제시켜 장애가 발생되었을 때 이용될 수 없는 노드의 세션을 이용이 가능한 노드쪽에 복사시켜 주는 메커니즘으로 multicast프로토콜을 이용하여 각 노드간의 톰캣 인스턴스를 점검하고 세션을 복제하게 됩니다.
Tomcat Clustering 서버 구성
Clustering 구축 과정 상세 내용
본 문서는 Apache2, Tomcat5, JK2 를 이용한 세션 복제 클러스터링과 로드벨런싱 실제 구축 과정을 정리하였습니다. 다른 환경에서의 구축시 참조용으로 가능하나 모든 내용이 같을 수 없습니다.)
CentOS(linux)용 버전을 받아 사용 합니다.
jdk-1_5_0_21-linux-i586.bin
httpd-2.2.10.tar.gz
apache-tomcat-5.5.28.tar.gz
jakarta-tomcat-connectors-jk2-src-current.tar.tar
우선 리눅스 멀티캐스트를 지원하는지 확인
ifconfig -a
eth0 Link encap:Ethernet HWaddr 00:1A:64:E5:EA:48
inet addr:222.xxx.xxx.233 Bcast:222.xxx.xxx.239 Mask:255.255.255.240
inet6 addr: fe80::21a:64ff:fee5:ea48/64 Scope:Link
UP BROADCAST RUNNING MULTICAST MTU:1500 Metric:1
RX packets:3029014 errors:0 dropped:0 overruns:0 frame:0
TX packets:2870213 errors:0 dropped:0 overruns:0 carrier:0
collisions:0 txqueuelen:1000
RX bytes:625295791 (596.3 MiB) TX bytes:597045250 (569.3 MiB)
Interrupt:169 Memory:92000000-92012800
4번째 줄 RUNNING MULTICAST <-- 있다면 OK 만약 없다면 다음 명령어 입력 하여 Enable 시킴 # ifconfig eth0 multicast
1.기존 설치된 JRE 구버전을 삭제 후 1.5 버전을 설치 합니다.
확인 후 삭제
rpm -qa | grep gcj
rpm -e --nodeps jdk.xxxxxxx
설치
chmod 755 jdk-1_5_0_21-linux-i586.bin
./jdk-1_5_0_21-linux-i586.bin
라이센스 내용 나오면 스페이스바를 눌러 맨 마지막까지 이동 후 yes 입력
환경변수
vi /etc/profile
맨아래 두줄 추가 후 저장
PATH="$PATH:/usr/java/jdk1.5.0_21/bin"
export JAVA_HOME="/usr/java/jdk1.5.0_21"
저장 후 적용
source /etc/profile
2.아파치 설치
wget http://archive.apache.org/dist/httpd/httpd-2.2.10.tar.gz
tar -zxvf httpd-2.2.10.tar.gz
cd httpd-2.2.10
컴파일진행
./configure --prefix=/usr/local/apache --enable-unique-id --enable-so --enable-rewrite
make
make install
부팅시 자동 실행설정
vi /etc/rc.local
/usr/local/apache/bin/apachectl start
Apache MPM 모듈 설정
모듈확인
/usr/local/apache/bin/apachectl -l
Apache MPM 모듈 설정 파일 작성 (extra 샘플 파일 활용) [prefork]
cd /usr/local/apache/conf/
cp ./extra/httpd-mpm.conf ./
vi httpd-mpm.conf
아파치 스타트
./apachectl start
※오류 httpd: Could not reliably determine the server's fully qualified domain name, using 127.0.0.1 for ServerName
위 오류는 Servername을 지정해주면 된다.
httpd.conf 파일의 90라인쯤7
ServerName 127.0.0.1 이렇게 해준다. 또는 localhost
※오류 httpd: apr_sockaddr_info_get() failed for KL_WEB1
호스트 네임을 변경해준다.
hostname localhost
데몬확인
netstat -lntp
./apachectl start
무반응. pid가 없다면
service httpd start 이걸로 스타트
다시 데몬확인
http://서버아이피 로 아파치 화면확인
3.톰캣 설치
http://tomcat.apache.org/
다운받는다. 압축해제
tar zxvf apache-tomcat-5.5.28.tar.gz
환경변수
vi /etc/profile
export TOMCAT_HOME='/usr/local/tomcat'
export PATH=$PATH:$TOMCAT_HOME/bin
export CLASSPATH=$CLASSPATH:$TOMCAT_HOME/common/lib/jsp-api.jar:$TOMCAT_HOME/common/lib/servlet-api.jar
source /etc/profile
톰켓스타트, 스톱 테스트
./startup.sh
./shutdown.sh
java 권한없다고 나오면 권한설정
/usr/local/jdk1.5.0_21/bin
chmod 755 java javac
톰켓 실행권한이 없다고 나오면 권한설정
cd /usr/local/apache-tomcat2/bin
chmod 755 digest.sh catalina.sh setclasspath.sh shutdown.sh startup.sh tool-wrapper.sh
4.JK2 설치
http://tomcat.apache.org 에서 다운 받는다.
tar xvf jakarta-tomcat-connectors-jk2-src-current.tar.tar
cd jakarta-tomcat-connectors-jk2-2.0.4-src/jk/native2
./buildconf.sh
./configure --with-apxs2=/usr/local/apache/bin/apxs
make
모듈(mod_jk2.so) 아파치 모듈로 복사
cd ../build/jk2/apache2
cp mod_jk2.so /usr/local/apache/modules/
cp mod_jk2.conf /usr/local/apache/conf/
mod_jk2.conf(없다면 생성)
#####################################################
<IfModule mod_jk2.c>
#-----------------------------------------------
# Where to find the workers2.properties file
#-----------------------------------------------
#
JkSet config.file /usr/local/apache/conf/workers2.properties
</IfModule>
#####################################################
conf 파일(workers2.properties) 복사
cd ../../../conf
cp workers2.properties.minimal /usr/local/apache/conf/workers2.properties
apache httpd.conf 설정
vi /usr/local/apache/conf/httpd.conf
LoadModule jk2_module modules/mod_jk2.so
workers2.properties 설정
vi workers2.properties
[lb:lb]
noErrorHeader=1
stickySession=1
recovery=60
#socket channel, explicitly set port and host
[channel.socket:localhost:11009] # server.xml <Connector port="11009" enableLookups="false" protocol="AJP/1.3"/>
info=Ajp13 forwarding over socket
port=11009
host=222.xxx.xxx.234
graceful=0
debug=0
tomcatId=tomcat1 # server.xml <Engine jvmRoute="tomcat1" ...
group=lb
#define the worker
[ajp13:localhost:11009]
tomcatId=tomcat1
max_connections=120
channel=channel.socket:localhost:11009
group=lb
# Uri mapping
[uri:/*.jsp]
group=lb
[uri:/*.high1]
group=lb
[uri:/servlet/*]
group=lb
톰캣 server.xml 설정
<Connector port="11009" enableLookups="false" protocol="AJP/1.3"/> <!-- 아파치와 연동하기 위한 포트 -->
<!-- jvmRoute 명 JK 커넥터에서 톰캣 프로세스를 구분하는데 사용. 프로세스 별로 다르게 적용해야 함 tomcat1, tomcat2, tomcat3... -->
<Engine jvmRoute="tomcat1" name="Catalina" defaultHost="localhost">
"</Context> 바로 밑에 아래 내용 삽입"
<Cluster className="org.apache.catalina.cluster.tcp.SimpleTcpCluster"
managerClassName="org.apache.catalina.cluster.session.DeltaManager"
expireSessionsOnShutdown="false"
useDirtyFlag="true">
<Membership
className="org.apache.catalina.cluster.mcast.McastService"
mcastAddr="228.0.0.4"
mcastPort="45564"
mcastFrequency="500"
mcastDropTime="3000"/>
<Receiver
className="org.apache.catalina.cluster.tcp.ReplicationListener"
tcpListenAddress="222.xxx.xxx.233" <!-- 디폴트 auto -->
tcpListenPort="4001" <!--한 서버내에서는 포트를 서로 다르게 설정해야함. 4002, 4003 ...-->
tcpSelectorTimeout="100"
tcpThreadCount="6"/>
<Sender
className="org.apache.catalina.cluster.tcp.ReplicationTransmitter"
replicationMode="pooled"/>
<Valve className="org.apache.catalina.cluster.tcp.ReplicationValve"
filter=".*\.gif;.*\.js;.*\.jpg;.*\.png;.*\.htm;.*\.html;.*\.css;.*\.txt;"/>
</Cluster>
jk2.properties 설정
vi jk2.properties
channelSocket.port=12009
shm.file=/usr/local/apache/logs/jk2.shm
apr.jniModeSo=inprocess
웹 어플리케이션 web.xml 설정
vi xxxxx/WEB-INF/web.xml
"<web-app> 바로 아래 아래 태그 추가"
<distributable/>
톰캣을 더 설치 할 경우 위 내용 반복
server.xml
jk2.properties
workers2.properties
환경변수 추가
