Rocky Linux 10 강좌 / journalctl·파일 로그·로그 회전과 디스크 사용량 관리

Rocky Linux 10의 로그는 systemd 저널과 일반 파일 로그의 수집 경로를 먼저 구분한 뒤, 서비스·부팅·시간 조건으로 조회하고 각 저장 방식에 맞춰 회전과 보존을 설정합니다. 저널은 journald가 관리하고 파일 로그는 프로그램과 logrotate의 동작을 함께 확인해야 합니다. 이 글에서는 기존 로그를 지우지 않고 별도 실습 저널과 파일에서 조회·회전·압축·보존 결과를 확인합니다.

저널과 파일 로그, 저장 공간을 먼저 구분

systemd-journald는 서비스 출력과 시스템 이벤트 등을 구조화된 저널에 기록하며, journalctl로 조회합니다. rsyslog나 응용 프로그램은 별도의 텍스트 파일을 기록할 수 있습니다. 같은 이벤트가 여러 경로로 전달되거나 프로그램이 한쪽에만 기록할 수도 있으므로, 한 파일이 없다는 이유로 로그 전체가 없다고 판단하지 않습니다.

rpm -q systemd logrotate rsyslog
systemctl is-active systemd-journald rsyslog
sudo journalctl --disk-usage
df -hT /var/log
sudo du -xsh /var/log

실제 검증 환경은 Rocky Linux 10.2, systemd 257, logrotate 3.22.0, rsyslog 8.2510.0입니다. 명령은 전용 VM의 Linux 게스트에서 실행했습니다. 처음 조사한 기본 저널 사용량은 8M, /var/log의 디렉터리 사용량은 13M이었습니다. df는 그 경로가 속한 루트 파일 시스템 전체를 보여 주므로 이 값들과 같은 수치일 필요가 없습니다.

확인 방법 보여 주는 것 해석할 때 구분할 점
df -hT /var/log 해당 경로가 속한 파일 시스템의 용량·사용량 /var/log 디렉터리만의 크기가 아닙니다.
du -xsh /var/log 같은 파일 시스템 안의 해당 디렉터리 트리 사용량 권한·별도 마운트·열려 있지만 삭제된 파일 등에 따라 df와 차이가 날 수 있습니다.
journalctl --disk-usage 선택한 저널의 활성·보관 파일 사용량 일반 텍스트 로그와 다른 응용 프로그램 자료까지 합친 값이 아닙니다.

공간이 부족하다면 먼저 어느 파일 시스템과 수집 경로가 커졌는지 조사합니다. 원인과 보존 요구를 확인하기 전에 /var/log 전체를 삭제하거나 기본 저널을 일괄 청소하는 방식은 사용하지 않습니다. 필요한 장애 증거를 안전한 위치에 내보내고, 그 뒤에 보존 정책과 실제 회전 결과를 확인합니다.

기본 로그와 분리한 실습 저널 준비

이번에는 lf-course24라는 저널 네임스페이스를 사용합니다. 네임스페이스는 별도의 수집 인스턴스와 저장 공간을 선택하는 기능으로, 기존 기본 저널의 설정을 바꾸지 않고 실습할 수 있습니다. --namespace=lf-course24를 빼면 조회·회전·청소 대상이 달라지므로 이후 명령에서도 유지하세요.

실습 전용 경로가 이미 있으면 새로 덮어쓰지 말고 이전 상태부터 확인합니다. 아래 백업 디렉터리와 네임스페이스 설정은 이번 실습에서만 사용합니다.

sudo mkdir -m 700 /root/lf-course24
sudo cp -a /etc/logrotate.conf /root/lf-course24/logrotate-original.conf
sudo cp -a /etc/logrotate.d /root/lf-course24/logrotate-original.d
sudo sh -c 'systemd-analyze cat-config systemd/journald.conf > /root/lf-course24/journald-original.txt'
sudo mkdir -m 755 /etc/systemd/journald@lf-course24.conf.d
sudoedit /etc/systemd/journald@lf-course24.conf.d/10-course.conf

설정 파일의 전체 내용은 다음과 같습니다. 지원 파일 경로와 옵션 정의는 journald.conf 공식 매뉴얼을 참고하세요.

[Journal]
Storage=persistent
SystemMaxUse=16M
SystemKeepFree=16M
SystemMaxFileSize=1M
MaxRetentionSec=1day
ForwardToSyslog=no

Storage=persistent는 영구 저장 경로를 선택하고, SystemMaxUse·SystemKeepFree는 사용량과 남겨 둘 공간에 관한 조건입니다. SystemMaxFileSize는 개별 파일 크기, MaxRetentionSec는 보존 기간을 제한하는 설정입니다. 실습의 작은 수치를 운영 서버의 권장값으로 그대로 사용하지 마세요. 실제 로그 발생량·분석 기간·디스크 여유에 맞춰 정해야 합니다.

파일 회전·삭제 단위와 활성 파일 때문에 순간 사용량을 정확한 한 바이트 단위의 상한으로 해석할 수는 없습니다. 이번 검증에서는 설정 로드와 수동 회전·파일 개수 정리를 확인했으며, 하루가 지나 자동 삭제되는 과정이나 16M 한계에 도달하는 부하 시험은 하지 않았습니다. ForwardToSyslog=no는 이 실습 저널의 syslog 전달을 끄는 설정이며 기본 rsyslog 설정은 유지합니다.

sudoedit /root/lf-course24/write-journal.py로 파일을 열고 다음 Python 예제를 저장합니다. Python 3가 필요하며, 인자 1~4에 따라 구분되는 로그 300줄을 출력합니다.

import sys

def main():
    batch=sys.argv[1]
    if batch not in {'1','2','3','4'}:
        raise ValueError('Use lab batch 1 to 4')
    for number in range(300):
        print(f'LF24-BATCH{batch}-{number:03d} '+ 'x'*128, flush=True)
if __name__=='__main__':
    main()

아래 반복문은 별도의 일회성 서비스로 네 배치를 실행하고, 앞의 세 배치 뒤에 회전합니다. 서비스의 표준 출력을 이 네임스페이스의 저널로 보냅니다. 기본 저널 데몬을 재시작하는 명령은 사용하지 않습니다.

for batch in 1 2 3 4; do
  sudo systemd-run --quiet --wait --collect \
    --unit="lf-course24-batch${batch}" \
    --property=LogNamespace=lf-course24 \
    --property=StandardOutput=journal \
    /usr/bin/python3 /root/lf-course24/write-journal.py "$batch"
  sudo journalctl --namespace=lf-course24 --sync
  if test "$batch" -lt 4; then
    sudo journalctl --namespace=lf-course24 --rotate
  fi
done

새 네임스페이스 인스턴스가 시작될 때 전용 설정을 읽습니다. 이미 실행 중인 인스턴스를 수정하는 상황에서는 설정 적용 방법과 출력 중인 서비스를 별도로 고려해야 합니다. 이 명령을 기존 실습 이름에 무작정 반복하지 않습니다.

서비스·부팅·시간·우선순위로 저널 찾기

실습 로그를 만든 뒤 조회 조건을 좁혀 봅니다. -b는 현재 부팅, -u는 유닛, --since는 시작 시점입니다. -n 3으로 마지막 세 줄을 보고 --no-pager로 페이지 프로그램을 생략할 수 있습니다.

sudo journalctl --namespace=lf-course24 -b \
  -u lf-course24-batch4.service -n 3 --no-pager -o short-iso
sudo journalctl --namespace=lf-course24 -b \
  -u lf-course24-batch4.service --since '10 minutes ago' --no-pager -q -o cat
sudo journalctl --namespace=lf-course24 -b \
  -u lf-course24-batch4.service -p warning --no-pager -q -o cat

실제로 마지막 로그는 LF24-BATCH4-297~299였고, 생성 직후의 10분 범위 조회에서는 300줄이 나왔습니다. -p warning은 경고 이상 우선순위의 항목을 선택하며, 이 시험 출력에서는 0줄이었습니다. 검색 결과가 없다는 사실은 조건에 맞는 항목이 없다는 뜻이지 서비스가 정상임을 증명하는 결과는 아닙니다. 네임스페이스·유닛 이름·부팅·시간 범위·권한도 함께 확인하세요.

필요한 메시지를 파일로 내보낼 때는 현재 사용자 셸의 리디렉션 권한도 고려합니다. 아래는 root 전용 실습 경로에 저장하는 예입니다. 실제 운영 로그에는 사용자 정보·토큰 등 민감한 값이 있을 수 있으므로 공개 게시물이나 외부 전달용으로 사용하기 전에 내용과 권한을 확인해야 합니다.

sudo sh -c 'journalctl --namespace=lf-course24 -b -u lf-course24-batch4.service --no-pager -q -o cat > /root/lf-course24/batch4-export.txt'
sudo wc -l /root/lf-course24/batch4-export.txt

검증에서는 내보낸 메시지가 300줄임을 확인했습니다. 필터와 출력·회전·청소 옵션의 정의는 journalctl 공식 매뉴얼에서 확인할 수 있습니다.

저널 회전과 파일 개수 제한의 실제 의미

--rotate는 현재 활성 파일을 보관 파일로 전환하고 새 활성 파일을 여는 작업입니다. 회전 자체를 이전 로그의 삭제와 혼동하지 마세요. 반면 --vacuum-files는 오래된 보관 파일을 삭제할 수 있는 정리 명령입니다. 다음은 지워도 되는 전용 실습 로그에서만 실행합니다.

sudo journalctl --namespace=lf-course24 --disk-usage
sudo journalctl --namespace=lf-course24 --sync
sudo journalctl --namespace=lf-course24 --vacuum-files=1
sudo journalctl --namespace=lf-course24 --disk-usage

중요한 차이는 --vacuum-files=1이 ‘보관 파일 1개를 남긴다’는 뜻이 아니라는 점입니다. 개수 제한에는 활성 파일도 영향을 주지만 삭제 작업은 보관 파일만 대상으로 합니다. 활성 파일을 제거할 수 없어서 지정한 개수까지 줄지 못하는 경우도 있습니다.

이번 실습은 활성 파일 1개와 앞의 세 배치가 들어 있는 보관 파일 3개로 시작했습니다. 파일 개수 제한 1을 적용하자 보관 파일 3개가 모두 삭제되었고 활성 파일만 남았습니다. 배치 1·2·3은 각각 0줄, 활성 파일의 배치 4는 300줄로 확인했습니다. 사용량은 약 1.5M에서 1M으로 바뀌었습니다.

--disk-usage는 활성·보관 저널의 실제 사용량을 함께 보여 줍니다. 파일 목록의 논리적인 파일 크기와 디스크에서 실제 할당된 공간도 다를 수 있으므로 파일 크기를 단순 합산한 값과 차이가 날 수 있습니다. 용량·기간·개수 기준을 함께 설계하고, 삭제 전에 필요한 로그를 별도 보관해야 합니다.

별도 파일과 상태 파일로 logrotate 검증

일반 파일 로그에는 별도 logrotate 설정을 사용합니다. 기존 /etc/logrotate.d에 등록하거나 시스템 상태 파일을 공유하지 않고, 전용 파일 하나만 회전합니다. 다음 디렉터리가 이미 있다면 덮어쓰지 않고 먼저 조사합니다.

sudo mkdir -m 750 /var/log/lf-course24
sudoedit /root/lf-course24/logrotate.conf

설정 파일의 전체 내용은 다음과 같습니다. size 1k는 실행 시 파일이 크기 조건을 넘었는지 판단하고, rotate 2는 회전한 파일을 두 개 보관하도록 지정합니다. 현재 기록 파일까지 합하면 세 파일이 있을 수 있으므로 저널의 파일 개수 옵션과 혼동하지 않습니다.

/var/log/lf-course24/application.log {
    size 1k
    rotate 2
    compress
    missingok
    notifempty
    create 0640 root root
}

compress는 회전 파일을 압축하고, create는 새 현재 로그 파일의 권한·소유자를 지정합니다. missingok는 없는 파일을 허용하고 notifempty는 빈 파일을 회전하지 않게 합니다. 실습 파일은 root가 쓰므로 해당 소유권을 사용하며, 운영 서비스의 실제 계정에 무조건 적용하는 값은 아닙니다.

sudoedit /root/lf-course24/write-file.py로 파일을 열어 아래 시험 파일 생성용 전체 예제를 저장합니다. 이미 내용이 있는 현재 로그는 덮어쓰지 않으며, 회전 후 비어 있는 파일에 다음 배치를 만듭니다.

import sys
from pathlib import Path

def main():
    batch=sys.argv[1]
    if batch not in {'1','2','3'}:
        raise ValueError('Use lab batch 1 to 3')
    path=Path('/var/log/lf-course24/application.log')
    if path.exists() and path.stat().st_size:
        raise RuntimeError('Refusing to overwrite a nonempty log')
    with path.open('w') as stream:
        for number in range(20):
            stream.write(f'FILE24-BATCH{batch}-{number:02d} '+ 'y'*128+'\n')
    path.chmod(0o640)
if __name__=='__main__':
    main()

먼저 1번 배치를 만든 뒤 디버그 모드로 실행 계획만 확인합니다.

sudo python3 /root/lf-course24/write-file.py 1
sudo sha256sum /var/log/lf-course24/application.log
sudo logrotate --debug --state /root/lf-course24/logrotate.state /root/lf-course24/logrotate.conf
sudo sha256sum /var/log/lf-course24/application.log

이번 검증에서는 앞뒤 해시가 같았고 압축본과 상태 파일도 생성되지 않았습니다. 디버그 출력에 renaming이나 Creating new state 같은 계획이 보이더라도 실제 변경이 완료됐다는 뜻이 아닙니다. 실제 실행과 상태 파일 옵션은 logrotate 공식 매뉴얼에서 구분합니다.

이제 1번 배치를 실제 회전한 뒤 2·3번 배치를 차례대로 생성하고 회전합니다. 크기 기준으로 실습하므로 강제 실행 옵션은 사용하지 않습니다.

sudo logrotate --verbose --state /root/lf-course24/logrotate.state /root/lf-course24/logrotate.conf
for batch in 2 3; do
  sudo python3 /root/lf-course24/write-file.py "$batch"
  sudo logrotate --verbose --state /root/lf-course24/logrotate.state /root/lf-course24/logrotate.conf
done
sudo stat -c '%a %U:%G %s %n' /var/log/lf-course24/application.log /var/log/lf-course24/application.log.1.gz /var/log/lf-course24/application.log.2.gz
sudo gzip -cd /var/log/lf-course24/application.log.1.gz | head -n 1
sudo gzip -cd /var/log/lf-course24/application.log.2.gz | head -n 1

실제 결과는 현재 파일이 0바이트·권한 640·소유자 root였고, .1.gz에는 3번 배치 20줄, .2.gz에는 2번 배치 20줄이 남았습니다. 가장 오래된 1번 배치는 제거되었습니다. 빈 현재 파일에 다시 실행했을 때는 회전하지 않았습니다.

이 설정은 logrotate가 실행될 때 검사하는 조건입니다. size 1k를 지정했다고 파일이 항상 1 KiB 이하로 유지되는 것은 아닙니다. 실제 운영에서는 스케줄의 실행 간격과 발생량을 함께 확인해야 합니다. 이 실습은 수동 실행 검증이며 시스템 타이머나 전역 설정을 변경하지 않았습니다.

운영 로그에 적용할 때 확인할 점과 정리

일회성 시험 프로그램은 쓰기를 마치고 종료했으므로 파일 이름을 바꾼 뒤 새 파일을 만들어도 다음 배치가 새 파일을 사용합니다. 계속 실행 중인 데몬은 열린 이전 파일에 계속 쓸 수 있습니다. 운영 서비스의 공식 재열기·재로드 방법과 logrotate의 postrotate 등을 확인해야 하며, 이 시험을 데몬의 로그 재열기까지 검증한 결과로 확대하면 안 됩니다.

copytruncate도 모든 프로그램에 맞는 해결책은 아닙니다. 복사와 잘라내기 사이의 기록 손실 가능성 등 매뉴얼의 조건을 검토하세요. 문제를 피하려고 기존 로그를 무조건 지우거나 서비스를 강제 종료하는 대신, 해당 서비스의 기록 방식과 파일 권한·SELinux 레이블·회전 후 동작을 함께 확인합니다.

실습을 끝내면 전용 저널 인스턴스와 소켓만 중지합니다. 기본 systemd-journald.service나 rsyslog를 중지할 필요가 없습니다.

sudo journalctl --namespace=lf-course24 --sync
sudo systemctl stop systemd-journald@lf-course24.service systemd-journald@lf-course24.socket systemd-journald-varlink@lf-course24.socket
sudo cp -a /etc/systemd/journald@lf-course24.conf.d/10-course.conf /root/lf-course24/journald-namespace.conf
sudo rm -- /etc/systemd/journald@lf-course24.conf.d/10-course.conf
sudo rmdir /etc/systemd/journald@lf-course24.conf.d
systemctl is-active systemd-journald rsyslog

시험 로그·내보내기·상태 파일은 필요하면 실습 기록으로 보관합니다. 실제 검증에서는 전용 네임스페이스의 로그 경로와 파일 로그 목록을 확인하고 백업 해시가 같은지 비교한 뒤, 해당 전용 원본만 정리했습니다. 기본 저널 설정, 기존 logrotate 설정·개별 설정 파일과 fstab은 작업 전과 일치했고 기본 journald·rsyslog·SSH·방화벽은 활성 상태였습니다.