Rocky Linux 10 教程 / 查询systemd journal并安全轮转与保留文件日志
要管理 Rocky Linux 10 的日志,应先区分systemd journal与普通文件日志的收集路径,按服务、启动或时间过滤事件,并为每种存储方法配置保留策略。journal由journald管理;普通文件日志的写入和轮转则应结合应用程序行为与logrotate检查。本文演示了在单独的练习日志和文件上查看、轮转、压缩和保留结果,而不会删除现有日志。
先区分journal、文件日志与存储空间
systemd-journald 在结构化日志中记录服务输出和系统事件,并通过 journalctl 查看。rsyslog 或应用程序可以记录单独的文本文件。由于同一事件可能通过多个路径传递,或者程序可能只在一个位置记录,因此单个文件的缺失并不意味着整个日志丢失。
rpm -q systemd logrotate rsyslog
systemctl is-active systemd-journald rsyslog
sudo journalctl --disk-usage
df -hT /var/log
sudo du -xsh /var/log
原实验环境是 Rocky Linux 10.2,systemd 257,logrotate 3.22.0,rsyslog 8.2510.0。命令是在专用虚拟机的 Linux客户机上执行的。最初检查的默认journal使用量为 8M,而 /var/log 目录的使用量为 13M。df 显示该路径所属的整个根文件系统,因此不需要与这些值匹配。
| 如何检查 | 显示内容 | 解释时需要区分的要点 |
|---|---|---|
df -hT /var/log |
该路径所属文件系统的容量和使用情况 | 这不是仅 /var/log 目录的大小。 |
du -xsh /var/log |
同一文件系统中目录树的使用情况 | 根据权限、单独挂载点或已打开但已删除的文件,可能与“df”存在差异。 |
journalctl --disk-usage |
所选日志的活动和归档文件的使用情况 | 这不是包括常规文本日志和其他应用程序数据的综合值。 |
如果空间不足,首先调查是哪个文件系统和收集路径增长。在检查原因和保留要求之前,不要删除整个 /var/log 或批量清理默认日志。将必要的故障证据导出到安全位置,然后查看保留策略和实际轮转结果。
准备与默认journal分离的练习命名空间
这一次,我们将使用一个名为 lf-course24 的日志命名空间。命名空间允许您选择一个单独的集合实例和存储空间,这样您就可以在不更改现有默认日志设置的情况下进行练习。如果排除 --namespace=lf-course24,查询、轮转和清理的目标将会不同,因此请在后续命令中保留它。
如果一个仅用于练习的路径已经存在,请不要覆盖它;先检查之前的状态。下面的备份目录和命名空间设置仅用于本次练习。
sudo bash <<'BASH'
set -eu
test ! -e /root/lf-course24
test ! -e /etc/systemd/journald@lf-course24.conf.d
mkdir -m 700 /root/lf-course24
cp -a /etc/logrotate.conf /root/lf-course24/logrotate-original.conf
cp -a /etc/logrotate.d /root/lf-course24/logrotate-original.d
systemd-analyze cat-config systemd/journald.conf > /root/lf-course24/journald-original.txt
mkdir -m 755 /etc/systemd/journald@lf-course24.conf.d
BASH
sudoedit /etc/systemd/journald@lf-course24.conf.d/10-course.conf
配置文件的完整内容如下。有关支持的文件路径和选项定义,请参阅官方 journald.conf 手册 。
[Journal]
Storage=persistent
SystemMaxUse=16M
SystemKeepFree=16M
SystemMaxFileSize=1M
MaxRetentionSec=1day
ForwardToSyslog=no
Storage=persistent 是用于选择永久存储路径的设置,SystemMaxUse · SystemKeepFree 是关于使用和剩余空间的条件。SystemMaxFileSize 涉及单个文件大小,MaxRetentionSec 是限制保留期限的设置。不要将练习中的小数值作为生产服务器的推荐值。它们应根据实际日志生成量、分析周期和可用磁盘空间来确定。
由于文件轮转、删除单元和活动文件,暂时的使用量不能被解释为精确字节的上限。原验证检查了设置加载和手动轮转/文件数量管理,但未对一天后的自动删除过程或达到16M限制的负载测试进行测试。ForwardToSyslog=no 是一个用于禁用此实践日志的syslog转发的设置,并且保持默认的rsyslog设置。
使用 sudoedit /root/lf-course24/write-journal.py 打开一个文件,并保存以下Python示例。需要Python 3,它会根据参数1–4输出300行日志。
import sys
def main():
batch=sys.argv[1]
if batch not in {'1','2','3','4'}:
raise ValueError('Use lab batch 1 to 4')
for number in range(300):
print(f'LF24-BATCH{batch}-{number:03d} '+ 'x'*128, flush=True)
if __name__=='__main__':
main()
以下循环将四个批次作为独立的一次性服务运行,在前三个批次之后进行轮转。该服务的标准输出会发送到此命名空间的日志中。不要使用命令重新启动默认的日志守护进程。
bash <<'BASH'
set -euo pipefail
for batch in 1 2 3 4; do
sudo systemd-run --quiet --wait --collect \
--unit="lf-course24-batch${batch}" \
--property=LogNamespace=lf-course24 \
--property=StandardOutput=journal \
/usr/bin/python3 /root/lf-course24/write-journal.py "$batch"
sudo journalctl --namespace=lf-course24 --sync
if test "$batch" -lt 4; then
sudo journalctl --namespace=lf-course24 --rotate
fi
done
BASH
当一个新的命名空间实例启动时,它会读取专用设置。在修改已运行的实例的情况下,你需要单独考虑这些设置如何应用以及当前输出的服务。不要盲目在现有的实验室名称上重复此命令。
按服务、启动、时间和优先级查找日志。
创建实验日志后,尝试缩小搜索条件。-b 代表当前启动,-u 代表单元,--since 代表开始时间。-n 3 允许查看最后三行,--no-pager 让你跳过分页程序。
sudo journalctl --namespace=lf-course24 -b \
-u lf-course24-batch4.service -n 3 --no-pager -o short-iso
sudo journalctl --namespace=lf-course24 -b \
-u lf-course24-batch4.service --since '10 minutes ago' --no-pager -q -o cat
sudo journalctl --namespace=lf-course24 -b \
-u lf-course24-batch4.service -p warning --no-pager -q -o cat
在源实验中,最后的日志是 LF24-BATCH4-297 ~ 299,在创建后立即进行 10 分钟范围查询产生了 300 行。-p warning 选择警告优先级或更高的项目,在此测试输出中,有 0 行。搜索结果为空表示没有符合条件的项目,而不是服务正常运行。请同时检查命名空间、单元名称、启动、时间范围和权限。
在将必要的消息导出到文件时,还需要考虑当前用户 shell 的重定向权限。下面是一个保存到仅限 root 的实验路径的示例。实际操作日志可能包含敏感信息,如用户信息和令牌,因此在公开发布或对外分发之前,应检查其内容和权限。
sudo sh -c 'journalctl --namespace=lf-course24 -b -u lf-course24-batch4.service --no-pager -q -o cat > /root/lf-course24/batch4-export.txt'
sudo wc -l /root/lf-course24/batch4-export.txt
在验证中,确认导出的消息包含 300 行。过滤器的定义以及输出、轮转和清理选项可在 journalctl 官方手册 中找到。
journal 日志轮转和文件数量限制的实际含义
--rotate 是将当前活动文件转换为归档文件并打开新活动文件的操作。不要将文件轮转本身与删除以前的日志混淆。另一方面,--vacuum-files 是一个清理命令,可以删除旧的归档文件。以下操作仅在可以删除的专用练习日志上执行。
sudo journalctl --namespace=lf-course24 --disk-usage
sudo journalctl --namespace=lf-course24 --sync
sudo journalctl --namespace=lf-course24 --vacuum-files=1
sudo journalctl --namespace=lf-course24 --disk-usage
在测试的 systemd 257 行为中,--vacuum-files=1 并不意味着“保留一个归档文件”。文件数量限制也会影响活动文件,但删除操作仅适用于归档文件。有些情况下无法将数量减少到指定值,因为活动文件不能被删除。
此操作从一个活动文件和三个包含之前三批次的归档文件开始。在应用文件数量限制为1时,所有三个归档文件被删除,只剩下活动文件。批次1、2和3的行数均为0,而活动文件中的批次4确认有300行。使用量从约1.5M变为1M。
--disk-usage 显示了活动和归档日志的实际使用情况。由于文件列表中的逻辑文件大小和磁盘上实际分配的空间可能不同,因此文件大小的总和可能会有所差异。设计时应同时考虑容量、周期和数量标准,并在删除前分别存储必要的日志。
使用单独的文件和状态文件验证logrotate。
为常规文件日志使用单独的 logrotate 配置。不要注册到现有的 /etc/logrotate.d 或共享系统状态文件中,只旋转一个专用的单独文件。如果以下目录已经存在,请先检查它们,而不要覆盖。
sudo mkdir -m 750 /var/log/lf-course24
sudoedit /root/lf-course24/logrotate.conf
配置文件的完整内容如下。size 1k 在运行时确定文件是否超过大小条件,rotate 2 指定保留两个已旋转的文件。包括当前日志文件,可能有三个文件,因此这不同于journal的文件数量清理选项。
/var/log/lf-course24/application.log {
size 1k
rotate 2
compress
missingok
notifempty
create 0640 root root
}
compress 压缩已轮转的文件,而 create 设置新当前日志文件的权限和所有权。missingok 允许缺失文件,而 notifempty 防止轮转空文件。由于练习文件是由 root 编写的,因此使用该所有权,但这些设置不一定适用于实际操作服务账户。
使用 sudoedit /root/lf-course24/write-file.py 打开文件并保存整个示例以创建下方的测试文件。带有现有内容的当前日志不会被覆盖,下一批将在轮转后的空文件中创建。
import sys
from pathlib import Path
def main():
batch=sys.argv[1]
if batch not in {'1','2','3'}:
raise ValueError('Use lab batch 1 to 3')
path=Path('/var/log/lf-course24/application.log')
if path.exists() and path.stat().st_size:
raise RuntimeError('Refusing to overwrite a nonempty log')
with path.open('w') as stream:
for number in range(20):
stream.write(f'FILE24-BATCH{batch}-{number:02d} '+ 'y'*128+'\n')
path.chmod(0o640)
if __name__=='__main__':
main()
首先创建批次 1,然后仅在调试模式下检查执行计划。
sudo python3 /root/lf-course24/write-file.py 1
sudo sha256sum /var/log/lf-course24/application.log
sudo logrotate --debug --state /root/lf-course24/logrotate.state /root/lf-course24/logrotate.conf
sudo sha256sum /var/log/lf-course24/application.log
在此验证中,前后哈希值相同,并且未创建压缩文件和状态文件。即使调试输出显示像 renaming 或 Creating new state 这样的计划,也不意味着实际更改已经完成。实际执行和状态文件选项在 logrotate 官方手册 中有所区分。
现在,实际上先旋转批次1,然后按顺序创建并旋转批次2和3。由于这是基于大小的练习,因此未使用强制执行选项。
sudo logrotate --verbose --state /root/lf-course24/logrotate.state /root/lf-course24/logrotate.conf
for batch in 2 3; do
sudo python3 /root/lf-course24/write-file.py "$batch"
sudo logrotate --verbose --state /root/lf-course24/logrotate.state /root/lf-course24/logrotate.conf
done
sudo stat -c '%a %U:%G %s %n' /var/log/lf-course24/application.log /var/log/lf-course24/application.log.1.gz /var/log/lf-course24/application.log.2.gz
sudo gzip -cd /var/log/lf-course24/application.log.1.gz | head -n 1
sudo gzip -cd /var/log/lf-course24/application.log.2.gz | head -n 1
实际结果是当前文件大小为 0 字节,权限为 640,所有者为 root,.1.gz 中剩余批次 3 的 20 行,.2.gz 中剩余批次 2 的 20 行。最旧的批次 1 已被移除。再次在空的当前文件上执行时,没有进行轮转。
此设置是 logrotate 运行时检查的条件。指定 size 1k 并不总是能保持文件在 1 KiB 以下。在实际操作中,需要同时检查计划的执行间隔和生成量。本练习是手动执行验证,并未更改系统定时器或全局设置。
对运行中的服务应用轮转并清理实验环境
由于一次性测试程序在完成写入后会退出,即使你重命名文件并创建一个新文件,下一批次也会使用新文件。持续运行的守护进程可能会继续写入先前打开的文件。你需要查看操作服务的官方重新打开/重新加载方法,以及 logrotate 中诸如 postrotate 的功能,而且不应将此测试结果扩展用于验证守护进程日志的重新打开。
copytruncate 并不是适合所有程序的解决方案。请查看手册中的条件,例如复制和截断操作之间可能存在的数据丢失。不要盲目删除现有日志或强制停止服务以避免问题,而应检查服务的日志记录方法,以及文件权限、SELinux 标签和轮转后的行为。
完成练习后,仅停止专用的 journal 实例和 socket。没有必要停止默认的 systemd-journald.service 或 rsyslog。
sudo journalctl --namespace=lf-course24 --sync
sudo systemctl stop systemd-journald@lf-course24.service systemd-journald@lf-course24.socket systemd-journald-varlink@lf-course24.socket
sudo cp -a /etc/systemd/journald@lf-course24.conf.d/10-course.conf /root/lf-course24/journald-namespace.conf
sudo rm -- /etc/systemd/journald@lf-course24.conf.d/10-course.conf
sudo rmdir /etc/systemd/journald@lf-course24.conf.d
systemctl is-active systemd-journald rsyslog
测试日志、导出和状态文件在需要时会保留作为练习记录。在原验证中,检查了专用命名空间中的日志路径和文件日志列表,并在比较备份哈希是否相同之后,仅整理了对应的专用原件。默认的 journal 设置、现有的 logrotate 设置、各个配置文件和 fstab 与工作前一致,默认的 journald、rsyslog、SSH 和防火墙处于活动状态。




