Rocky Linux 10 Kurs / Journale und Datei-Logs mit journalctl und logrotate verwalten

Um Logs unter Rocky Linux 10 zu verwalten, identifizieren Sie die Pfade für Journale und Datei-Logs, filtern Sie Ereignisse nach Dienst, Boot oder Zeit und konfigurieren Sie die Aufbewahrung für jede Speichermethode. Journale werden von journald verwaltet, während Datei-Logs sowohl mit Programm- als auch mit Logrotate-Operationen überprüft werden müssen. Dieser Artikel zeigt die Anzeige, Rotation, Kompression und Aufbewahrungsergebnisse auf separaten Übungs-Journals und -Dateien, ohne bestehende Logs zu löschen.

Unterscheiden Sie Journal, Datei-Logs und Speicherplatzbedarf

systemd-journald zeichnet Dienstausgaben und Systemereignisse in strukturierten Journaldateien auf. Mit journalctl lesen Sie diese Einträge. rsyslog oder Anwendungen können separate Textdateien aufzeichnen. Da dasselbe Ereignis über mehrere Pfade geliefert werden kann oder ein Programm nur an einem Ort aufzeichnet, bedeutet das Fehlen einer einzelnen Datei nicht, dass das gesamte Log fehlt.

rpm -q systemd logrotate rsyslog
systemctl is-active systemd-journald rsyslog
sudo journalctl --disk-usage
df -hT /var/log
sudo du -xsh /var/log

Die ursprüngliche Laborumgebung war Rocky Linux 10.2, systemd 257, logrotate 3.22.0, rsyslog 8.2510.0. Die Befehle wurden auf einem Linux-Gast einer dedizierten VM ausgeführt. Der ursprünglich untersuchte Basis-Journalverbrauch betrug 8M, und der Verzeichnisverbrauch von /var/log betrug 13M. df zeigt das gesamte Root-Dateisystem, zu dem dieser Pfad gehört, daher muss es nicht mit diesen Werten übereinstimmen.

Wie man prüft Was es anzeigt Zu unterscheidende Punkte bei der Interpretation
df -hT /var/log Kapazität und Nutzung des Dateisystems, zu dem dieser Pfad gehört Dies ist nicht die Größe nur des Verzeichnisses /var/log.
du -xsh /var/log Verwendung des Verzeichnisbaums innerhalb desselben Dateisystems Es kann Unterschiede zu 'df' geben, abhängig von Berechtigungen, separaten Mounts oder Dateien, die geöffnet, aber gelöscht wurden.
journalctl --disk-usage Verwendung von aktiven und archivierten Dateien des ausgewählten Journals Dies ist nicht der kombinierte Wert, der reguläre Textprotokolle und andere Anwendungsdaten einschließt.

Wenn der Speicherplatz nicht ausreicht, untersuchen Sie zunächst, welches Dateisystem und welcher Sammlungspfad angewachsen ist. Bevor Sie die Ursache und die Aufbewahrungsanforderungen überprüfen, löschen Sie nicht das gesamte /var/log oder führen Sie eine Stapelbereinigung des Standardjournals durch. Exportieren Sie die notwendigen Fehlbelege an einen sicheren Ort und überprüfen Sie dann die Aufbewahrungsrichtlinie und die tatsächlichen Rotations­ergebnisse.

Bereiten Sie ein spezielles Übungsjournal vor, getrennt vom Standardprotokoll.

Dieses Mal werden wir einen Journal-Namespace namens lf-course24 verwenden. Ein Namespace ermöglicht es Ihnen, eine separate Sammlung und einen eigenen Speicherplatz auszuwählen, sodass Sie üben können, ohne die Einstellungen des bestehenden Standardjournals zu ändern. Wenn Sie --namespace=lf-course24 ausschließen, unterscheiden sich die Abfrage-, Rotations- und Reinigungsziele, also behalten Sie es in den nachfolgenden Befehlen bei.

Wenn ein nur für das Üben bestimmter Pfad bereits existiert, überschreiben Sie ihn nicht; überprüfen Sie zunächst den vorherigen Zustand. Das untenstehende Backup-Verzeichnis und die Namespace-Einstellungen werden nur für diese Übung verwendet.

sudo bash <<'BASH'
set -eu
test ! -e /root/lf-course24
test ! -e /etc/systemd/journald@lf-course24.conf.d
mkdir -m 700 /root/lf-course24
cp -a /etc/logrotate.conf /root/lf-course24/logrotate-original.conf
cp -a /etc/logrotate.d /root/lf-course24/logrotate-original.d
systemd-analyze cat-config systemd/journald.conf > /root/lf-course24/journald-original.txt
mkdir -m 755 /etc/systemd/journald@lf-course24.conf.d
BASH
sudoedit /etc/systemd/journald@lf-course24.conf.d/10-course.conf

Der vollständige Inhalt der Konfigurationsdatei ist wie folgt. Für die unterstützten Dateipfade und Optionsdefinitionen, siehe das offizielle journald.conf Handbuch .

[Journal]
Storage=persistent
SystemMaxUse=16M
SystemKeepFree=16M
SystemMaxFileSize=1M
MaxRetentionSec=1day
ForwardToSyslog=no

Storage=persistent ist die Einstellung, um einen permanenten Speicherpfad auszuwählen, und SystemMaxUse · SystemKeepFree sind Bedingungen bezüglich Nutzung und verbleibendem Platz. SystemMaxFileSize betrifft die Größe einzelner Dateien, und MaxRetentionSec ist eine Einstellung, die die Aufbewahrungsdauer begrenzt. Verwenden Sie die kleinen Werte dieser Übung nicht als empfohlene Werte für einen Produktionsserver. Sie sollten entsprechend dem tatsächlichen Log-Erstellungsvolumen, Analysezeitraum und verfügbarem Speicherplatz bestimmt werden.

Aufgrund von Dateirotation, Löschungseinheiten und aktiven Dateien kann die momentane Nutzung nicht als obere Grenze in exakten Bytes interpretiert werden. Die Quellprüfung überprüfte die Ladeeinstellungen und die manuelle Rotation/Dateianzahlverwaltung, führte jedoch keine Tests für den automatischen Löschvorgang nach einem Tag oder Lasttests, die das 16M-Limit erreichen, durch. ForwardToSyslog=no ist eine Einstellung, um die Weiterleitung an Syslog für dieses Übungsjournal zu deaktivieren, und die Standard-rsyslog-Einstellungen werden beibehalten.

Öffnen Sie eine Datei mit sudoedit /root/lf-course24/write-journal.py und speichern Sie das folgende Python-Beispiel. Python 3 wird benötigt, und es gibt 300 Protokollzeilen aus, die nach den Argumenten 1–4 unterschieden werden.

import sys

def main():
    batch=sys.argv[1]
    if batch not in {'1','2','3','4'}:
        raise ValueError('Use lab batch 1 to 4')
    for number in range(300):
        print(f'LF24-BATCH{batch}-{number:03d} '+ 'x'*128, flush=True)
if __name__=='__main__':
    main()

Die folgende Schleife führt vier Chargen als separaten einmaligen Dienst aus und rotiert nach den ersten drei Chargen. Die Standardausgabe des Dienstes wird an das Journal dieses Namespace gesendet. Verwenden Sie keine Befehle, um den Standard-Journal-Daemon neu zu starten.

bash <<'BASH'
set -euo pipefail
for batch in 1 2 3 4; do
  sudo systemd-run --quiet --wait --collect \
    --unit="lf-course24-batch${batch}" \
    --property=LogNamespace=lf-course24 \
    --property=StandardOutput=journal \
    /usr/bin/python3 /root/lf-course24/write-journal.py "$batch"
  sudo journalctl --namespace=lf-course24 --sync
  if test "$batch" -lt 4; then
    sudo journalctl --namespace=lf-course24 --rotate
  fi
done
BASH

Wenn eine neue Namespace-Instanz gestartet wird, liest sie dedizierte Einstellungen. In Situationen, in denen Sie eine bereits laufende Instanz ändern, müssen Sie separat überlegen, wie die Einstellungen angewendet werden und welche Dienste derzeit Ausgaben erzeugen. Wiederholen Sie diesen Befehl nicht blind auf einem vorhandenen Labornamen.

Finden Sie Journale nach Dienst, Start, Zeit und Priorität.

Nach dem Erstellen von Laborprotokollen versuchen Sie, die Suchbedingungen einzugrenzen. -b steht für den aktuellen Bootvorgang, -u steht für die Einheit und --since steht für die Startzeit. -n 3 ermöglicht das Ansehen der letzten drei Zeilen, und --no-pager lässt das Pager-Programm überspringen.

sudo journalctl --namespace=lf-course24 -b \
  -u lf-course24-batch4.service -n 3 --no-pager -o short-iso
sudo journalctl --namespace=lf-course24 -b \
  -u lf-course24-batch4.service --since '10 minutes ago' --no-pager -q -o cat
sudo journalctl --namespace=lf-course24 -b \
  -u lf-course24-batch4.service -p warning --no-pager -q -o cat

Im Quelllabor waren die letzten Protokolle LF24-BATCH4-297 ~ 299, und eine 10-minütige Bereichsabfrage direkt nach der Erstellung ergab 300 Zeilen. -p warning wählt Elemente mit Warnpriorität oder höher aus, und in diesem Testausgang gab es 0 Zeilen. Das Fehlen von Suchergebnissen bedeutet, dass keine Elemente den Bedingungen entsprechen, nicht dass der Dienst normal arbeitet. Überprüfen Sie zusammen den Namespace, den Einheitsnamen, den Bootvorgang, den Zeitraum und die Berechtigungen.

Beim Exportieren notwendiger Nachrichten in eine Datei sollten auch die Umleitungsberechtigungen der Shell des aktuellen Benutzers berücksichtigt werden. Unten ist ein Beispiel für das Speichern in einem nur für Root zugänglichen Laborpfad. Tatsächliche Betriebsprotokolle können sensible Werte wie Benutzerinformationen und Tokens enthalten, daher sollten Sie den Inhalt und die Berechtigungen prüfen, bevor Sie sie in öffentlichen Beiträgen oder für externe Verteilungen verwenden.

sudo sh -c 'journalctl --namespace=lf-course24 -b -u lf-course24-batch4.service --no-pager -q -o cat > /root/lf-course24/batch4-export.txt'
sudo wc -l /root/lf-course24/batch4-export.txt

Bei der Überprüfung wurde bestätigt, dass die exportierte Nachricht aus 300 Zeilen bestand. Filter sowie Ausgabe-, Rotations- und Bereinigungsoptionen beschreibt das offizielle journalctl-Handbuch.

Die eigentliche Bedeutung der Journalrotation und der Begrenzung der Dateianzahl

--rotate ist der Vorgang, die momentan aktive Datei in eine archivierte Datei zu konvertieren und eine neue aktive Datei zu öffnen. Verwechseln Sie die Rotation selbst nicht mit dem Löschen vorheriger Protokolle. Andererseits ist --vacuum-files ein Bereinigungskommando, das alte archivierte Dateien löschen kann. Folgendes wird nur bei speziellen Übungsprotokollen ausgeführt, die gelöscht werden können.

sudo journalctl --namespace=lf-course24 --disk-usage
sudo journalctl --namespace=lf-course24 --sync
sudo journalctl --namespace=lf-course24 --vacuum-files=1
sudo journalctl --namespace=lf-course24 --disk-usage

Im getesteten systemd 257-Verhalten bedeutete --vacuum-files=1 nicht ‚eine archivierte Datei behalten‘. Die Dateianzahlbegrenzung betrifft auch die aktive Datei, aber Löschvorgänge gelten nur für archivierte Dateien. Es gibt Fälle, in denen sie nicht auf die angegebene Zahl reduziert werden kann, da die aktive Datei nicht entfernt werden kann.

Der Quellversuch begann mit einer aktiven Datei und drei archivierten Dateien, die die vorherigen drei Chargen enthielten. Bei Anwendung eines Dateizähllimits von 1 wurden alle drei archivierten Dateien gelöscht, sodass nur die aktive Datei übrig blieb. Die Chargen 1, 2 und 3 hatten jeweils 0 Zeilen, und Charge 4 in der aktiven Datei wurde bestätigt, 300 Zeilen zu haben. Die Nutzung änderte sich von etwa 1,5M auf 1M.

--disk-usage zeigt die tatsächliche Nutzung von aktiven und archivierten Journals zusammen. Da die logische Dateigröße in der Dateiliste und der tatsächlich auf der Festplatte zugewiesene Speicherplatz unterschiedlich sein können, kann die Summe der Dateigrößen abweichen. Entwerfen Sie unter Berücksichtigung von Kapazität, Zeitraum und Zählkriterien zusammen und speichern Sie die erforderlichen Protokolle vor der Löschung separat.

Überprüfen Sie logrotate mit separaten Dateien und Statusdateien.

Verwenden Sie eine separate Logrotate-Konfiguration für allgemeine Datei-Logs. Anstatt sich beim bestehenden /etc/logrotate.d zu registrieren oder Systemstatusdateien zu teilen, rotieren Sie nur eine eigens angelegte Datei. Wenn die folgenden Verzeichnisse bereits existieren, untersuchen Sie diese zuerst, ohne sie zu überschreiben.

sudo mkdir -m 750 /var/log/lf-course24
sudoedit /root/lf-course24/logrotate.conf

Der vollständige Inhalt der Konfigurationsdatei ist wie folgt. size 1k prüft bei der Ausführung von logrotate, ob die Datei die Größenbedingung überschreitet, und rotate 2 gibt an, dass zwei rotierte Archivdateien behalten werden sollen. Einschließlich der aktuellen Logdatei können es drei Dateien sein, daher sollte dies nicht mit der Dateianzahloption des Journals verwechselt werden.

/var/log/lf-course24/application.log {
    size 1k
    rotate 2
    compress
    missingok
    notifempty
    create 0640 root root
}

compress komprimiert rotierte Dateien, und create legt die Berechtigungen und den Eigentümer der neuen aktuellen Protokolldatei fest. missingok erlaubt fehlende Dateien, und notifempty verhindert die Rotation von leeren Dateien. Da die Übungsdateien vom root-Benutzer geschrieben werden, verwenden Sie diesen Eigentümer, aber diese Einstellungen werden nicht unbedingt auf tatsächliche Betriebskonten angewendet.

Öffnen Sie die Datei mit sudoedit /root/lf-course24/write-file.py und speichern Sie das gesamte Beispiel zum Erstellen der unten stehenden Testdatei. Das aktuelle Protokoll mit vorhandenem Inhalt wird nicht überschrieben, und die nächste Charge wird in der leeren Datei nach der Rotation erstellt.

import sys
from pathlib import Path

def main():
    batch=sys.argv[1]
    if batch not in {'1','2','3'}:
        raise ValueError('Use lab batch 1 to 3')
    path=Path('/var/log/lf-course24/application.log')
    if path.exists() and path.stat().st_size:
        raise RuntimeError('Refusing to overwrite a nonempty log')
    with path.open('w') as stream:
        for number in range(20):
            stream.write(f'FILE24-BATCH{batch}-{number:02d} '+ 'y'*128+'\n')
    path.chmod(0o640)
if __name__=='__main__':
    main()

Erstellen Sie zuerst Batch 1 und prüfen Sie dann nur den Ausführungsplan im Debug-Modus.

sudo python3 /root/lf-course24/write-file.py 1
sudo sha256sum /var/log/lf-course24/application.log
sudo logrotate --debug --state /root/lf-course24/logrotate.state /root/lf-course24/logrotate.conf
sudo sha256sum /var/log/lf-course24/application.log

Bei dieser Überprüfung waren die Hashes vor und nach dem Debug-Lauf identisch, und die komprimierten Dateien sowie Zustandsdateien wurden nicht erstellt. Auch wenn die Debug-Ausgabe Pläne wie renaming oder Creating new state zeigt, bedeutet dies nicht, dass die tatsächlichen Änderungen abgeschlossen wurden. Die tatsächliche Ausführung und die Optionsdateien für Zustände werden im offiziellen logrotate-Handbuch unterschieden.

Rotieren Sie nun tatsächlich Batch 1. Erstellen und rotieren Sie anschließend nacheinander die Batches 2 und 3. Da dies eine praxisbezogene Übung entsprechend der Größe ist, wird die erzwungene Ausführungsoption nicht verwendet.

sudo logrotate --verbose --state /root/lf-course24/logrotate.state /root/lf-course24/logrotate.conf
for batch in 2 3; do
  sudo python3 /root/lf-course24/write-file.py "$batch"
  sudo logrotate --verbose --state /root/lf-course24/logrotate.state /root/lf-course24/logrotate.conf
done
sudo stat -c '%a %U:%G %s %n' /var/log/lf-course24/application.log /var/log/lf-course24/application.log.1.gz /var/log/lf-course24/application.log.2.gz
sudo gzip -cd /var/log/lf-course24/application.log.1.gz | head -n 1
sudo gzip -cd /var/log/lf-course24/application.log.2.gz | head -n 1

Das tatsächliche Ergebnis war, dass die aktuelle Datei 0 Bytes groß war, Berechtigung 640, Besitzer root, mit 20 Zeilen von Batch 3 verbleibend in .1.gz und 20 Zeilen von Batch 2 verbleibend in .2.gz. Der älteste Batch 1 wurde entfernt. Wenn es erneut auf der leeren aktuellen Datei ausgeführt wurde, wurde sie nicht rotiert.

Diese Einstellung ist die Bedingung, die logrotate überprüft, wenn es ausgeführt wird. Das Angeben von size 1k hält die Datei nicht immer unter 1 KiB. Im praktischen Betrieb müssen Sie sowohl das Ausführungsintervall des Zeitplans als auch die erzeugte Menge prüfen. Diese Übung ist eine manuelle Ausführungsverifikation und hat den Systemtimer oder die globalen Einstellungen nicht geändert.

Rotation auf laufende Dienste anwenden und das Labor aufräumen

Da das einmalige Testprogramm das Schreiben beendet und beendet, wird beim Umbenennen der Datei und Erstellen einer neuen Datei der nächste Batch die neue Datei verwenden. Ein kontinuierlich laufender Daemon könnte weiterhin in die zuvor geöffnete Datei schreiben. Sie müssen die offizielle Wiederöffnungs-/Neuladungsmethode des Betriebsdienstes und Funktionen wie postrotate in logrotate überprüfen, und Sie sollten dieses Testergebnis nicht auf das Überprüfen des erneuten Öffnens von Daemon-Logs ausweiten.

copytruncate ist keine für jedes Programm geeignete Lösung. Überprüfen Sie die Bedingungen im Handbuch, wie z. B. die Möglichkeit des Verlusts zwischen Kopieren und anschließendem Kürzen der Originaldatei. Anstatt vorhandene Logs wahllos zu löschen oder den Dienst zwangsweise zu stoppen, um Probleme zu vermeiden, überprüfen Sie die Protokollierungsmethode des Dienstes zusammen mit Datei-Berechtigungen, SELinux-Labels und dem Verhalten nach der Rotation.

Beim Beenden der Übung stoppen Sie nur die dedizierte Journalinstanz und ihre Sockets. Es ist nicht nötig, das Standard- systemd-journald.service oder rsyslog zu stoppen.

sudo journalctl --namespace=lf-course24 --sync
sudo systemctl stop systemd-journald@lf-course24.service systemd-journald@lf-course24.socket systemd-journald-varlink@lf-course24.socket
sudo cp -a /etc/systemd/journald@lf-course24.conf.d/10-course.conf /root/lf-course24/journald-namespace.conf
sudo rm -- /etc/systemd/journald@lf-course24.conf.d/10-course.conf
sudo rmdir /etc/systemd/journald@lf-course24.conf.d
systemctl is-active systemd-journald rsyslog

Testprotokolle, Exporte und Statusdateien werden bei Bedarf als Übungsaufzeichnungen aufbewahrt. Bei der Quellüberprüfung wurden die Protokollpfade und die Protokolllisten in dem dedizierten Namensraum überprüft, und nach dem Vergleich, ob die Backup-Hashes identisch waren, wurde nur die eigens angelegte Namespace-Konfigurationsdatei nach ihrer Sicherung entfernt. Die Standardeinstellungen des Journals, die bestehenden logrotate-Einstellungen, einzelne Konfigurationsdateien und fstab stimmten mit denen vor der Arbeit überein, und das Standard-journald, rsyslog, SSH und die Firewall waren aktiv.