JG IT배움터

WEB 로그 종류

• • Access 로그 : WEB 서버에 대한 요청 로그, HTTP 상태 코드 (200, 4XX, 5XX 등) 등 확인 가능
  • Error 로그 : WEB 서버에서 발생한 모든 중요한 로그 (서버 구성 오류, 클라이언트 요청 오류, 내부 서버 오류 등)

1) Access 로그

• 1.2.3.4 : 클라이언트의 IP 주소
• -: 원격 사용자 이름. "-"는 웹 서버가 사용자 이름을 결정하지 못했음을 나타냅니다. 웹 서버가 RFC 1413에 따라 원격 사용자 이름을 확인하도록 설정된 경우에만 사용 가능
• -: 인증된 사용자 이름."-"는 사용자가 인증되지 않았음을 나타냅니다. 웹 서버가 HTTP 인증을 사용하여 사용자를 인증하도록 설정된 경우에만 사용 가능
• [21/May/2024:09:01:34 +0900]: 요청이 발생한 시간. 이 형식은 "[day/month/year:hour:minute:second timezone]"
• "GET /favicon.ico HTTP/1.1": 요청 라인. "GET"은 HTTP 메소드, "/favicon.ico"는 요청된 리소스의 URI, "HTTP/1.1"은 사용된 HTTP 프로토콜의 버전
• 404: 서버가 클라이언트에게 반환한 HTTP 상태 코드 404는 "Not Found"를 의미하며, 요청된 리소스를 서버에서 찾을 수 없음을 나타냄
• 268: 서버가 클라이언트에게 보낸 응답의 바이트 크기. 서버는 268바이트의 데이터를 클라이언트에게 보냈으며, HTTP 헤더를 포함하지 않고 본문만 포함

추가 설정

• %{X-Forwarded-For}i: 클라이언트의 원래 IP 주소를 로그에 기록. 바로 앞 단의 IP 뿐만 아니라 최초의 클라이언트 IP부터 로그에 남길 수 있는 설정
• %D: 요청 응답 시간(마이크로초)

2) Error 로그

1. 기동
   
   [Fri Sep 10 10:41:21.495400 2021][mpm_prefork:notice][pid 1234]AH00163: Apache/2.4.41 (Unix) configured -- resuming normal operations

   [Fri Sep 10 10:41:21.495472 2021][core:notice][pid 1234]AH00094: Command line: '/usr/sbin/httpd'
   → 기동 되었을 때 찍히는 로그
   
   
2. 중지
   
   [Fri Sep 10 11:41:21.495400 2021][mpm_prefork:notice][pid 1234]AH00169: caught SIGTERM, shutting down
   → 중지 되었을 때 찍히는 로그
   
   
3. WAS 연결 실패
   [Fri Sep 10 12:41:21.495400 2021][proxy:error][pid 1234](111)Connection refused: AH00957: HTTP: attempt to connect to 127.0.0.1:8080 (localhost) failed

   [Fri Sep 10 12:41:21.495400 2021][proxy_http:error][pid 1234][client 192.168.1.1:56247]AH01114: HTTP: failed to make connection to backend: localhost
   → 백엔드에 연결된 WAS 상태 점검 필요

WAS 인스턴스 기동시 실행환경 설정(JVM Memoery, GC)와 애플리케이션에 필요한 JAVA 옵션 등을 관리할 수 있습니다.,

logging.properties 

• level 은 다음과 같이 ALL, FINEST, FINER, FINE, CONFIG, INFO, WARNING, SEVERE를 지원하며 오른쪽으로 갈수록 로그량이 적다.
• 기본 값이 FINE

Tomcat 로그 설정

단, 시스템의 콘솔 출력을 catalina.out 파일로 리디렉션 되도록 설정되어 있어야 함 (catalina.sh 또는 startup.sh 설정)

WAS 로그 종류 

• • catalina.out 로그 : 어플리케이션에서 설정한 로그 기록(WAS 기동/중지, DB 쿼리 등)
  • Access 로그 : WAS 서버에 대한 요청 로그, 서버가 클라이언트의 요청에 의해 반환한 HTTP 상태 코드 (200, 4XX, 5XX 등) 등 확인 가능
  • GC 로그 : GC 이벤트가 발생한 로그 기록 확인 가능

1) catalina.out 로그

1. 기동
    
   01-Oct-2021 10:00:00.123 INFO [main]org.apache.catalina.startup.Catalina.start Server startup in [1234]milliseconds
   → 기동 되었을 때 찍히는 로그. 해당 로그가 찍히더라도 비정상으로 서비스가 올라왔을 수 있으니 서비스 확인은 필수
   
   
2. 중지
   01-Oct-2021 10:30:00.456 INFO [main]org.apache.coyote.http11.Http11NioProtocol.pause Pausing ProtocolHandler ["http-nio-8080"]

   01-Oct-2021 10:30:00.789 INFO [main]org.apache.catalina.core.StandardService.stopInternal Stopping service [Catalina]

   01-Oct-2021 10:30:01.000 INFO [main]org.apache.coyote.http11.Http11NioProtocol.destroy Destroying ProtocolHandler ["http-nio-8080"]
   → 중지 되었을 때 찍히는 로그
   
   
3. OutOfMemoryError(OOME)
    
   Exception in thread "main" java.lang.OutOfMemoryError: Java heap space
       at java.base/java.util.Arrays.copyOf(Arrays.java:3745)
       at java.base/java.lang.AbstractStringBuilder.ensureCapacityInternal(AbstractStringBuilder.java:172)
       at java.base/java.lang.AbstractStringBuilder.append(AbstractStringBuilder.java:538)
       at java.base/java.lang.StringBuilder.append(StringBuilder.java:174)
       at com.example.MyApp.processData(MyApp.java:45)
   → OOME가 발생 되었을 때 찍히는 로그
   → 오류가 발생한 코드의 위치와 스택이 로그에 남음
   → 서비스 확인이 우선적으로 필요하며 Heap Memory 조정, 로직 호출 방식 수정 등으로 추후 조치 가능
   
   
4. 기타
   ## 예외 로그

   Exception in thread "main" java.lang.NullPointerException: Cannot invoke "String.length()" because "str" is null

       at com.example.MyApp.processData(MyApp.java:34)

    

   ## 경로 로그

   WARNING: An illegal reflective access operation has occurred

   WARNING: Illegal reflective access by com.example.Internals (file:/path/to/app.jar) to method java.base/jdk.internal.misc.Unsafe.allocateMemory(long)

   WARNING: Please consider reporting this to the maintainers of com.example.Internals

   WARNING: Use --illegal-access=warn to enable warnings of further illegal reflective access operations

   WARNING: All illegal access operations will be denied in a future release

    

   ##보안 로그

   SECURITY ALERT: Unauthorized access attempt detected. User: unknown, IP: 192.168.1.100

   SECURITY: Failed login attempt for username 'admin' from IP 192.168.1.100

   SECURITY: Password change requested for user JohnDoe
   → 로그 레벨에 따라 찍히는 로그가 다름.

2) Access 로그

• 1.1.1.1 : 클라이언트의 IP 주소
• -: 원격 사용자 이름. "-"는 웹 서버가 사용자 이름을 결정하지 못했음을 나타냅니다. 웹 서버가 RFC 1413에 따라 원격 사용자 이름을 확인하도록 설정된 경우에만 사용 가능
• -: 인증된 사용자 이름."-"는 사용자가 인증되지 않았음을 나타냅니다. 웹 서버가 HTTP 인증을 사용하여 사용자를 인증하도록 설정된 경우에만 사용 가능
• [21/May/2024:00:00:40 +0900]: 요청이 발생한 시간. 이 형식은 "[day/month/year:hour:minute:second timezone]"
• "GET / HTTP/1.1": 요청 라인. "GET"은 HTTP 메소드, "/"는 요청된 리소스의 URI, "HTTP/1.1"은 사용된 HTTP 프로토콜의 버전
• 200: 서버가 클라이언트에게 반환한 HTTP 상태 코드 200은 정상 응답하였음을 의미
• 201: 서버가 클라이언트에게 보낸 응답의 바이트 크기. 서버는 201바이트의 데이터를 클라이언트에게 보냈으며, HTTP 헤더를 포함하지 않고 본문만 포함
• 0: 요청 응답 시간(밀리초)

3) GC 로그

## GC 예시

• 2021-10-28T13:23:45.123+0000: 로그가 기록된 시간
• [GC (Allocation Failure)]: 가비지 컬렉션이 발생한 이유. 여기서는 'Allocation Failure'로, 새로운 객체를 할당하기 위한 공간이 충분하지 않아 GC가 트리거되었음을 의미
• [PSYoungGen: 512K->64K(1024K)]: Young 영역의 가비지 컬렉션 전후의 메모리 사용량과 총 크기
• 512K->72K(2048K): 전체 힙 메모리의 사용량이 가비지 컬렉션 전후로 어떻게 변했는지 보여줌. '2048K'는 전체 힙 크기
• 0.0016754 secs: 가비지 컬렉션을 수행하는 데 걸린 시간(초).
• [Times: user=0.00 sys=0.00, real=0.00 secs]: 가비지 컬렉션 동안의 CPU 시간 사용량

## Full GC 예시

• 2021-10-28T13:23:45.123+0000: 로그가 기록된 시간
• [Full GC (Metadata GC Threshold)]: Full GC가 발생한 이유. 'Metadata GC Threshold'는 메타스페이스가 일정 임계값에 도달하여 Full GC가 트리거되었음을 의미
• [PSYoungGen: 512K->0K(1024K)]: Young 영역의 가비지 컬렉션 전후의 메모리 사용량과 총 크기
• [ParOldGen: 1024K->788K(2048K)]: Old 영역의 가비지 컬렉션 전후의 메모리 사용량과 총 크기
• 1536K->788K(3072K): 전체 힙 메모리의 사용량이 가비지 컬렉션 전후로 어떻게 변했는지 보여줌. '3072K'는 전체 힙 크기
• [Metaspace: 2703K->2697K(1056768K)]: 메타스페이스의 사용량과 총 크기. 메타스페이스는 클래스 메타데이터를 저장하는 공간으로, PermGen의 대체(Java 1.7은 Perm, Java 1.8 이상은 Metaspace)
• 0.0323945 secs: 가비지 컬렉션을 수행하는 데 걸린 시간(초)
• [Times: user=0.05 sys=0.00, real=0.03 secs]: 가비지 컬렉션 동안의 CPU 시간 사용량

server.xml

tomcat (WAS) 설정

• https://tomcat.apache.org/download-80.cgi 홈페이지로 이동 후 tar.gz 링크를 복사 후 wget으로
  설치
• tomcat 포트가 8080이기 때문에 해당 포트에 대한 방화벽을 설정

Apache (WEB) 설정

• httpd 패키지 설치 후 아파치를 시작
• 80 포트, http, https 방화벽까지 열어준다.

• Apache 화면 열리는 것 확인

WEB, WAS 연동

1) WEB 설정

• mod_kj를 설치하기 위한 패키지들 gcc, gcc c++,httpd devel)을 설치
• http://tomcat.apache.org/download- connectors.cgi 주소에 들어가서 t omcat 받은 것과 같은 방법으로 tar.gz 파일을 설치(  https://dlcdn.apache.org/tomcat/tomcat- connectors/jk/tomcat
  connectors 1.2.48 src.tar.gz )
• 명령어를 모두 실행하면 mod_jk.so라는 파 일이 생긴다

• 명령어를 모두 실행하면 mod_jk.so라는 파 일이 생긴다.
• ./buildconf.sh 명령어를 실행해 준 후 필요한 패키지를 설치해 준다.
• chcon -u system_u -r object_r -t httpd_modules_t /etc/httpd/modules/mod_jk.so
• mod_jk 연동하는 과정에서 보안 관련해 오류 발생을 방지하기 위해 미리 권한을 부여

• 마지막 줄에 명령어 주석되어 있으면 풀어주고, 없으면 작성해서 추가

• worker.list: 사용할 톰캣 이름 목록 (mod_jk.conf 에 설정한 이름 (test)와 동일하게 설정
• worker. 톰캣이름 .port: 톰캣의 ajp 포트 번호 기본 값은 8009)
• worker. 톰캣이름 .host: 톰캣이 위치하고 있는 IP 주소 아파치와 톰캣이 한 서버에 있다면
  localhost)
• worker. 톰캣이름 .type: 톰캣과 연결할 때 사용할 타입
• worker. 톰캣이름 .lbfactor: 로드밸런싱할 때 사용함

※ 작업 후 apache 재실행

Tomcat(WAS) 설정

• server.xml 파일로 이동 후 Connector protocol 설정
• 후 tomcat 실행

• 8080 포트와 8009 포트가 작동하는지 확인
• ESTABLISHED 가 나오면 tomcat에 접속 가능

• 해당 홈페이지가 나오면 성공

jstat의 정보를 출력하는 쉘 스크립트

#!/bin/bash

source /home/shell/env.sh

#JAVA_WHERE="/usr/bin"
#JavaNames_gc=("대상 프로세스 이름")

for JavaName in "${JavaNames_gc[@]}"
do

# 검색되는 프로세스들의 PID를 추출
pid=$(ps aux | grep $JavaName | grep -v grep | awk '{print $2}')

# pid가 없을 경우 1 출력 후 종료
if [ -z "$pid" ]; then
    echo 1
    exit 0
fi

# jstat 정보들을 출력
result=$("$JAVA_WHERE"/jstat -gc "$pid" | tail -n 1 | awk '{print ($3+$4+$6+$8)/($1+$5+$7)*100')
HEAP_MEMORY_USAGE=$(printf "%.0f" "$result")

• jstat -gc 명령어를 사용하여 Java 프로세스의 GC 통계를 가져옵니다.
• 이를 통해 힙 메모리 사용량을 계산

GC_COUNT=$("$JAVA_WHERE"/jstat -gcold "$pid" | tail -n 1 | awk '{print $8}')

• jstat -gcold 명령어를 사용하여 Java 프로세스의 이전 GC 통계를 가져와 GC 횟수를 계산

echo $pid $JavaName "heap usage : " $HEAP_MEMORY_USAGE "FCCount : " $GC_COUNT

done