Rocky Linux 10: guida / Consultare journalctl e verificare la rotazione con logrotate

Per gestire i log di Rocky Linux 10, identifica i percorsi di raccolta dei journal e dei file di log, filtra gli eventi per servizio, avvio o tempo e configura la conservazione per ogni metodo di archiviazione. I journal sono gestiti da journald, mentre i file di log devono essere controllati sia con il programma sia con le operazioni di logrotate. Questo articolo mostra la visualizzazione, la rotazione, la compressione e i risultati della conservazione su journal e file di pratica separati senza eliminare i log esistenti.

Per prima cosa distingui tra registri del journal e file di log, e spazio di archiviazione

systemd-journald registra l'output dei servizi e gli eventi di sistema in journal strutturati e può essere visualizzato usando journalctl. rsyslog o le applicazioni possono registrare file di testo separati. Poiché lo stesso evento può essere consegnato attraverso più percorsi o un programma può registrare in un solo luogo, l'assenza di un singolo file non significa che l'intero log sia mancante.

rpm -q systemd logrotate rsyslog
systemctl is-active systemd-journald rsyslog
sudo journalctl --disk-usage
df -hT /var/log
sudo du -xsh /var/log

L'ambiente di laboratorio di origine era Rocky Linux 10.2, systemd 257, logrotate 3.22.0, rsyslog 8.2510.0. I comandi sono stati eseguiti su una macchina virtuale Linux dedicata. L'utilizzo inizialmente esaminato del journal di base era di 8M e l'utilizzo della directory di /var/log era di 13M. df mostra l'intero filesystem root a cui appartiene quel percorso, quindi non è necessario che corrisponda a questi valori.

Come controllare Cosa mostra Punti da distinguere durante l'interpretazione
df -hT /var/log Capacità e utilizzo del filesystem a cui appartiene quel percorso Questa non è la dimensione solo della directory /var/log.
du -xsh /var/log Utilizzo dell'albero delle directory all'interno dello stesso filesystem Potrebbero esserci differenze rispetto al 'df' a seconda dei permessi, dei mount separati o dei file aperti ma cancellati.
journalctl --disk-usage Utilizzo dei file attivi e archiviati del journal selezionato Questo non è il valore combinato che include i regolari log di testo e altri dati applicativi.

Se lo spazio è insufficiente, prima indagare su quale file system e percorso di raccolta sono cresciuti. Prima di verificare i requisiti di causa e conservazione, non eliminare l'intero /var/log o pulire in batch il journal predefinito. Esportare le prove necessarie di fallimento in un luogo sicuro, poi rivedere la politica di mantenimento e i risultati effettivi della rotazione.

Prepara un journal di pratica dedicato separato dal registro predefinito.

Questa volta useremo un namespace del journal chiamato lf-course24. Un namespace ti permette di scegliere un'istanza di raccolta e uno spazio di archiviazione separati, così puoi esercitarti senza modificare le impostazioni del journal predefinito esistente. Se escludi --namespace=lf-course24, la query, la rotazione e gli obiettivi di pulizia saranno diversi, quindi mantienilo nei comandi successivi.

Se esiste già un percorso solo per la pratica, non sovrascriverlo; verifica prima lo stato precedente. La directory di backup e le impostazioni del namespace riportate di seguito sono usate solo per questa pratica.

sudo bash <<'BASH'
set -eu
test ! -e /root/lf-course24
test ! -e /etc/systemd/journald@lf-course24.conf.d
mkdir -m 700 /root/lf-course24
cp -a /etc/logrotate.conf /root/lf-course24/logrotate-original.conf
cp -a /etc/logrotate.d /root/lf-course24/logrotate-original.d
systemd-analyze cat-config systemd/journald.conf > /root/lf-course24/journald-original.txt
mkdir -m 755 /etc/systemd/journald@lf-course24.conf.d
BASH
sudoedit /etc/systemd/journald@lf-course24.conf.d/10-course.conf

Il contenuto completo del file di configurazione è il seguente. Per i percorsi dei file supportati e le definizioni delle opzioni, fare riferimento al manuale ufficiale journald.conf .

[Journal]
Storage=persistent
SystemMaxUse=16M
SystemKeepFree=16M
SystemMaxFileSize=1M
MaxRetentionSec=1day
ForwardToSyslog=no

Storage=persistent è l'impostazione per selezionare un percorso di archiviazione permanente, e SystemMaxUse · SystemKeepFree sono condizioni relative all'uso e allo spazio rimanente. SystemMaxFileSize riguarda la dimensione dei singoli file, e MaxRetentionSec è un'impostazione che limita il periodo di conservazione. Non utilizzare le cifre ridotte dell'esempio pratico come valori consigliati per un server di produzione. Dovrebbero essere determinate in base al volume effettivo di generazione dei log, al periodo di analisi e allo spazio disco disponibile.

A causa della rotazione dei file, delle unità di cancellazione e dei file attivi, l'utilizzo momentaneo non può essere interpretato come un limite massimo in byte esatti. La verifica della sorgente ha controllato il caricamento delle impostazioni e la gestione manuale della rotazione/conteggio dei file, ma non ha eseguito test per il processo di cancellazione automatica dopo un giorno o test di carico fino al limite di 16M. ForwardToSyslog=no è un'impostazione per disabilitare l’inoltro dei messaggi da questo journal di laboratorio a syslog, e le impostazioni predefinite di rsyslog sono mantenute.

Aprire un file con sudoedit /root/lf-course24/write-journal.py e salvare il seguente esempio in Python. È richiesto Python 3, e genera 300 righe di log differenziate secondo gli argomenti da 1 a 4.

import sys

def main():
    batch=sys.argv[1]
    if batch not in {'1','2','3','4'}:
        raise ValueError('Use lab batch 1 to 4')
    for number in range(300):
        print(f'LF24-BATCH{batch}-{number:03d} '+ 'x'*128, flush=True)
if __name__=='__main__':
    main()

Il seguente ciclo esegue quattro batch come servizio una tantum separato, ruotando dopo i primi tre batch. L'output standard del servizio viene inviato al journal di questo namespace. Non usare comandi per riavviare il demone del journal predefinito.

bash <<'BASH'
set -euo pipefail
for batch in 1 2 3 4; do
  sudo systemd-run --quiet --wait --collect \
    --unit="lf-course24-batch${batch}" \
    --property=LogNamespace=lf-course24 \
    --property=StandardOutput=journal \
    /usr/bin/python3 /root/lf-course24/write-journal.py "$batch"
  sudo journalctl --namespace=lf-course24 --sync
  if test "$batch" -lt 4; then
    sudo journalctl --namespace=lf-course24 --rotate
  fi
done
BASH

Quando viene avviata una nuova istanza di namespace, legge le impostazioni dedicate. In situazioni in cui si sta modificando un'istanza già in esecuzione, è necessario considerare separatamente come vengono applicate le impostazioni e i servizi attualmente in output. Non ripetere ciecamente questo comando su un nome di laboratorio esistente.

Trova i journal per servizio, avvio, tempo e priorità.

Dopo aver creato i log di laboratorio, prova a restringere le condizioni di ricerca. -b rappresenta l'avvio corrente, -u rappresenta l'unità e --since rappresenta l'orario di inizio. -n 3 consente di visualizzare le ultime tre righe, e --no-pager ti permette di saltare il programma pager.

sudo journalctl --namespace=lf-course24 -b \
  -u lf-course24-batch4.service -n 3 --no-pager -o short-iso
sudo journalctl --namespace=lf-course24 -b \
  -u lf-course24-batch4.service --since '10 minutes ago' --no-pager -q -o cat
sudo journalctl --namespace=lf-course24 -b \
  -u lf-course24-batch4.service -p warning --no-pager -q -o cat

Nel laboratorio di origine, gli ultimi log erano LF24-BATCH4-297 ~ 299, e una query su un intervallo di 10 minuti subito dopo la creazione ha prodotto 300 righe. -p warning seleziona gli elementi con priorità di avviso o superiore, e in questo output di test non c'erano righe. L'assenza di risultati di ricerca significa che non ci sono elementi che corrispondono alle condizioni, non che il servizio funzioni normalmente. Controlla insieme namespace, nome dell'unità, avvio, intervallo di tempo e permessi.

Quando si esportano i messaggi necessari in un file, considerare anche i permessi di reindirizzamento della shell dell'utente corrente. Di seguito è riportato un esempio di salvataggio in un percorso di laboratorio accessibile solo a root. I log operativi reali possono contenere valori sensibili come informazioni sugli utenti e token, quindi dovresti controllare il contenuto e i permessi prima di utilizzarli in post pubblici o per distribuzioni esterne.

sudo sh -c 'journalctl --namespace=lf-course24 -b -u lf-course24-batch4.service --no-pager -q -o cat > /root/lf-course24/batch4-export.txt'
sudo wc -l /root/lf-course24/batch4-export.txt

Durante la verifica, è stato confermato che il messaggio esportato era composto da 300 righe. Le definizioni dei filtri e delle opzioni di output, rotazione e pulizia possono essere trovate nel manuale ufficiale di journalctl .

Il significato reale della rotazione dei journal e dei limiti sul numero di file

--rotate è l'operazione di conversione del file attualmente attivo in un file archiviato e apertura di un nuovo file attivo. Non confondere la rotazione in sé con l'eliminazione dei log precedenti. D'altra parte, --vacuum-files è un comando di pulizia che può eliminare i vecchi file archiviati. Quanto segue viene eseguito solo sui log di pratica dedicati che possono essere eliminati.

sudo journalctl --namespace=lf-course24 --disk-usage
sudo journalctl --namespace=lf-course24 --sync
sudo journalctl --namespace=lf-course24 --vacuum-files=1
sudo journalctl --namespace=lf-course24 --disk-usage

Nel comportamento testato di systemd 257, --vacuum-files=1 non significava 'lasciare un file archiviato'. Il limite del numero di file influisce anche sul file attivo, ma le operazioni di eliminazione si applicano solo ai file archiviati. Ci sono casi in cui non può essere ridotto al numero specificato perché il file attivo non può essere rimosso.

Questa pratica è iniziata con un file attivo e tre file archiviati contenenti i tre batch precedenti. Applicando un limite di conteggio dei file pari a 1, tutti e tre i file archiviati sono stati eliminati, lasciando solo il file attivo. I batch 1, 2 e 3 avevano ciascuno 0 righe, e il batch 4 nel file attivo è stato confermato avere 300 righe. L'utilizzo è passato da circa 1,5M a 1M.

--disk-usage mostra l'uso effettivo dei registri attivi e archiviati insieme. Poiché la dimensione logica del file nella lista dei file e lo spazio effettivamente allocato sul disco possono differire, la somma delle dimensioni dei file può essere diversa. Progettare considerando insieme i criteri di capacità, periodo e conteggio, e conservare separatamente i log necessari prima dell'eliminazione.

Verificare logrotate con file separati e file di stato.

Usare una configurazione separata di logrotate per i log dei file generali. Invece di registrare nei già esistenti /etc/logrotate.d o condividere file di stato del sistema, ruotare solo un file dedicato. Se le seguenti directory esistono già, verificarle prima senza sovrascrivere.

sudo mkdir -m 750 /var/log/lf-course24
sudoedit /root/lf-course24/logrotate.conf

Il contenuto completo del file di configurazione è il seguente. size 1k determina al momento dell'esecuzione se il file supera la condizione di dimensione, e rotate 2 specifica di mantenere due file ruotati. Includendo il file di log corrente, potrebbero esserci tre file, quindi questo non va confuso con l'opzione del conteggio dei file del journal.

/var/log/lf-course24/application.log {
    size 1k
    rotate 2
    compress
    missingok
    notifempty
    create 0640 root root
}

compress comprime i file ruotati e create imposta i permessi e la proprietà del nuovo file di log corrente. missingok permette file mancanti e notifempty previene la rotazione dei file vuoti. Poiché i file di pratica sono scritti da root, utilizzare quella proprietà, ma queste impostazioni non sono necessariamente applicate agli account di servizio operativo effettivi.

Apri il file con sudoedit /root/lf-course24/write-file.py e salva l'intero esempio per la creazione del file di test qui sotto. Il log corrente con contenuto esistente non viene sovrascritto e il prossimo batch viene creato nel file vuoto dopo la rotazione.

import sys
from pathlib import Path

def main():
    batch=sys.argv[1]
    if batch not in {'1','2','3'}:
        raise ValueError('Use lab batch 1 to 3')
    path=Path('/var/log/lf-course24/application.log')
    if path.exists() and path.stat().st_size:
        raise RuntimeError('Refusing to overwrite a nonempty log')
    with path.open('w') as stream:
        for number in range(20):
            stream.write(f'FILE24-BATCH{batch}-{number:02d} '+ 'y'*128+'\n')
    path.chmod(0o640)
if __name__=='__main__':
    main()

Per prima cosa, crea il batch 1 e poi verifica solo il piano di esecuzione in modalità debug.

sudo python3 /root/lf-course24/write-file.py 1
sudo sha256sum /var/log/lf-course24/application.log
sudo logrotate --debug --state /root/lf-course24/logrotate.state /root/lf-course24/logrotate.conf
sudo sha256sum /var/log/lf-course24/application.log

In questa verifica, gli hash prima e dopo la modalità debug erano uguali e i file compressi e di stato non sono stati creati. Anche se l'output di debug mostra piani come renaming o Creating new state, ciò non significa che le modifiche effettive siano state completate. L'effettiva esecuzione e le opzioni del file di stato sono distinte in logrotate manuale ufficiale .

Ora, ruota effettivamente il batch 1, quindi crea e ruota i batch 2 e 3 in ordine. Poiché questa è una pratica basata sulla dimensione, l'opzione di esecuzione forzata non viene utilizzata.

sudo logrotate --verbose --state /root/lf-course24/logrotate.state /root/lf-course24/logrotate.conf
for batch in 2 3; do
  sudo python3 /root/lf-course24/write-file.py "$batch"
  sudo logrotate --verbose --state /root/lf-course24/logrotate.state /root/lf-course24/logrotate.conf
done
sudo stat -c '%a %U:%G %s %n' /var/log/lf-course24/application.log /var/log/lf-course24/application.log.1.gz /var/log/lf-course24/application.log.2.gz
sudo gzip -cd /var/log/lf-course24/application.log.1.gz | head -n 1
sudo gzip -cd /var/log/lf-course24/application.log.2.gz | head -n 1

Il risultato effettivo è stato che il file corrente era di 0 byte, permesso 640, proprietario root, con 20 righe del batch 3 rimaste in .1.gz e 20 righe del batch 2 rimaste in .2.gz. Il batch 1 più vecchio è stato rimosso. Quando eseguito di nuovo sul file corrente vuoto, non è stato ruotato.

Questa impostazione è la condizione che logrotate controlla quando viene eseguito. Specificare size 1k non mantiene sempre il file sotto 1 KiB. Nella pratica, è necessario controllare sia l'intervallo di esecuzione del programma che la quantità generata. Questo esercizio è una verifica manuale dell'esecuzione e non ha modificato il timer di sistema o le impostazioni globali.

Applicare la rotazione ai servizi in esecuzione e pulire il laboratorio

Poiché il programma di test una tantum termina la scrittura ed esce, anche se rinomini il file e ne crei uno nuovo, il batch successivo utilizzerà il nuovo file. Un demone in esecuzione continua potrebbe continuare a scrivere sul file precedentemente aperto. È necessario verificare il metodo ufficiale di riapertura/ricarica del servizio operativo e funzionalità come postrotate in logrotate, e non si dovrebbe estendere questo risultato del test per verificare la riapertura dei log del demone.

copytruncate non è una soluzione adatta a tutti i programmi. Rivedere le condizioni nel manuale, come la possibilità di perdita tra le operazioni di copia e taglio. Invece di eliminare indiscriminatamente i log esistenti o arrestare forzatamente il servizio per evitare problemi, controllare il metodo di registrazione del servizio insieme ai permessi dei file, alle etichette SELinux e al comportamento dopo la rotazione.

Al termine dell'esercizio, interrompere solo l'istanza del journal e la socket dedicate. Non è necessario interrompere il systemd-journald.service predefinito o rsyslog.

sudo journalctl --namespace=lf-course24 --sync
sudo systemctl stop systemd-journald@lf-course24.service systemd-journald@lf-course24.socket systemd-journald-varlink@lf-course24.socket
sudo cp -a /etc/systemd/journald@lf-course24.conf.d/10-course.conf /root/lf-course24/journald-namespace.conf
sudo rm -- /etc/systemd/journald@lf-course24.conf.d/10-course.conf
sudo rmdir /etc/systemd/journald@lf-course24.conf.d
systemctl is-active systemd-journald rsyslog

I log di prova, le esportazioni e i file di stato vengono conservati come registrazioni dell'esercizio, se necessario. Nella verifica della fonte, sono stati controllati i percorsi dei log e le liste dei file di log nello spazio dei nomi dedicato; il file di configurazione dedicato del namespace è stato copiato nel backup e verificato prima di rimuovere soltanto quel nuovo file e la sua directory vuota. Le impostazioni del journal predefinito, le impostazioni esistenti di logrotate, i singoli file di configurazione e fstab corrispondevano a quelle precedenti al lavoro, e i servizi predefiniti di journald, rsyslog, SSH e firewall erano attivi.