Rocky Linux 10 : tutoriel / Consulter et faire tourner les journaux avec journald et logrotate
Pour gérer les logs de Rocky Linux 10, identifiez les chemins de collecte des journaux et des fichiers journaux, filtrez les événements par service, démarrage ou heure, et configurez la rétention pour chaque méthode de stockage. Les journaux sont gérés par journald, tandis que les fichiers journaux doivent être vérifiés avec les opérations du programme et de logrotate. Cet article montre comment visualiser, faire pivoter, compresser et conserver les résultats sur des journaux et fichiers de pratique séparés sans supprimer les journaux existants.
Commencez par distinguer entre les journaux et les fichiers de journal, ainsi que l'espace de stockage
systemd-journald enregistre la sortie des services et les événements du système dans des journaux structurés et se consulte à l'aide de journalctl. rsyslog ou des applications peuvent enregistrer des fichiers texte séparés. Comme le même événement peut être transmis par plusieurs voies ou qu’un programme peut n’enregistrer que dans un seul emplacement, l’absence d’un fichier unique ne signifie pas que le journal entier est manquant.
rpm -q systemd logrotate rsyslog
systemctl is-active systemd-journald rsyslog
sudo journalctl --disk-usage
df -hT /var/log
sudo du -xsh /var/log
L'environnement de laboratoire source était Rocky Linux 10.2, systemd 257, logrotate 3.22.0, rsyslog 8.2510.0. Les commandes ont été exécutées sur une machine virtuelle Linux dédiée. L'utilisation initiale du journal de base examinée était de 8M, et l'utilisation du répertoire de /var/log était de 13M. df montre l'ensemble du système de fichiers racine auquel ce chemin appartient, donc il n'est pas nécessaire que cela corresponde à ces valeurs.
| Comment vérifier | Ce que cela montre | Points à distinguer lors de l'interprétation |
|---|---|---|
df -hT /var/log |
Capacité et utilisation du système de fichiers auquel ce chemin appartient | Il ne s'agit pas de la taille du seul répertoire /var/log. |
du -xsh /var/log |
Utilisation de l'arborescence de répertoires au sein du même système de fichiers | Il peut y avoir des différences par rapport à 'df' selon les permissions, les montages séparés ou les fichiers qui sont ouverts mais supprimés. |
journalctl --disk-usage |
Utilisation des fichiers actifs et archivés du journal sélectionné | Il ne s'agit pas de la valeur combinée incluant les journaux texte réguliers et les autres données d'application. |
Si l'espace est insuffisant, commencez d'abord par vérifier quel système de fichiers et quel chemin de collection ont augmenté. Avant de vérifier la cause et les exigences de rétention, ne supprimez pas l'ensemble du /var/log ou ne procédez pas à un nettoyage par lot du journal par défaut. Exportez les preuves nécessaires des échecs vers un emplacement sûr, puis examinez la politique de rétention et les résultats réels de la rotation.
Préparez un journal de pratique dédié séparé du journal par défaut.
Cette fois, nous utiliserons un espace de noms de journal appelé lf-course24. Un espace de noms vous permet de choisir une instance de collection et un espace de stockage séparés, afin que vous puissiez pratiquer sans modifier les paramètres du journal par défaut existant. Si vous excluez --namespace=lf-course24, la requête, la rotation et les cibles de nettoyage seront différentes, alors conservez-le dans les commandes suivantes.
Si un chemin réservé uniquement à la pratique existe déjà, ne l'écrasez pas ; vérifiez d'abord l'état précédent. Le répertoire de sauvegarde et les paramètres d'espace de noms ci-dessous sont utilisés uniquement pour cette pratique.
sudo bash <<'BASH'
set -eu
test ! -e /root/lf-course24
test ! -e /etc/systemd/journald@lf-course24.conf.d
mkdir -m 700 /root/lf-course24
cp -a /etc/logrotate.conf /root/lf-course24/logrotate-original.conf
cp -a /etc/logrotate.d /root/lf-course24/logrotate-original.d
systemd-analyze cat-config systemd/journald.conf > /root/lf-course24/journald-original.txt
mkdir -m 755 /etc/systemd/journald@lf-course24.conf.d
BASH
sudoedit /etc/systemd/journald@lf-course24.conf.d/10-course.conf
Le contenu complet du fichier de configuration est le suivant. Pour les chemins de fichiers et les définitions d'options pris en charge, consultez le manuel officiel journald.conf .
[Journal]
Storage=persistent
SystemMaxUse=16M
SystemKeepFree=16M
SystemMaxFileSize=1M
MaxRetentionSec=1day
ForwardToSyslog=no
Storage=persistent est le paramètre pour sélectionner un chemin de stockage permanent, et SystemMaxUse · SystemKeepFree sont des conditions concernant l'utilisation et l'espace restant. SystemMaxFileSize concerne la taille individuelle des fichiers, et MaxRetentionSec est un paramètre qui limite la période de conservation. N'utilisez pas les petites valeurs issues de la pratique comme valeurs recommandées pour un serveur en production. Elles doivent être déterminées en fonction du volume réel des journaux générés, de la période d'analyse et de l'espace disque disponible.
En raison de la rotation des fichiers, des unités de suppression et des fichiers actifs, l'utilisation momentanée ne peut pas être interprétée comme une limite supérieure en octets exacts. La vérification de la source a contrôlé le chargement des paramètres et la gestion manuelle de la rotation/du nombre de fichiers, mais n'a pas effectué de test pour le processus de suppression automatique après un jour ni de test de charge atteignant la limite de 16M. ForwardToSyslog=no est un paramètre pour désactiver le transfert de ce journal de pratique vers syslog, et les paramètres rsyslog par défaut sont maintenus.
Ouvrez un fichier avec sudoedit /root/lf-course24/write-journal.py et enregistrez l'exemple Python suivant. Python 3 est requis et il génère 300 lignes de journal différenciées selon les arguments 1–4.
import sys
def main():
batch=sys.argv[1]
if batch not in {'1','2','3','4'}:
raise ValueError('Use lab batch 1 to 4')
for number in range(300):
print(f'LF24-BATCH{batch}-{number:03d} '+ 'x'*128, flush=True)
if __name__=='__main__':
main()
La boucle suivante exécute quatre lots en tant que service ponctuel distinct, avec une rotation après chacun des trois premiers lots. La sortie standard du service est envoyée au journal de cet espace de noms. N'utilisez pas de commandes pour redémarrer le démon de journalisation par défaut.
bash <<'BASH'
set -euo pipefail
for batch in 1 2 3 4; do
sudo systemd-run --quiet --wait --collect \
--unit="lf-course24-batch${batch}" \
--property=LogNamespace=lf-course24 \
--property=StandardOutput=journal \
/usr/bin/python3 /root/lf-course24/write-journal.py "$batch"
sudo journalctl --namespace=lf-course24 --sync
if test "$batch" -lt 4; then
sudo journalctl --namespace=lf-course24 --rotate
fi
done
BASH
Lorsqu'une nouvelle instance d'espace de noms démarre, elle lit les paramètres dédiés. Dans les situations où vous modifiez une instance déjà en cours d'exécution, vous devez considérer séparément la manière dont les paramètres sont appliqués et les services actuellement en sortie. Ne répétez pas aveuglément cette commande sur un nom de laboratoire existant.
Trouvez les journaux par service, démarrage, heure et priorité.
Après avoir créé des journaux de laboratoire, essayez de restreindre les conditions de recherche. -b représente le démarrage actuel, -u représente l'unité, et --since représente l'heure de début. -n 3 permet de voir les trois dernières lignes, et --no-pager permet de passer le programme pager.
sudo journalctl --namespace=lf-course24 -b \
-u lf-course24-batch4.service -n 3 --no-pager -o short-iso
sudo journalctl --namespace=lf-course24 -b \
-u lf-course24-batch4.service --since '10 minutes ago' --no-pager -q -o cat
sudo journalctl --namespace=lf-course24 -b \
-u lf-course24-batch4.service -p warning --no-pager -q -o cat
Dans le laboratoire source, les derniers journaux étaient LF24-BATCH4-297 ~ 299, et une requête sur une plage de 10 minutes immédiatement après la création a produit 300 lignes. -p warning sélectionne les éléments de priorité avertissement ou supérieure, et dans cette sortie de test, aucune ligne n’était présente. L'absence de résultats de recherche signifie qu'il n'y a aucun élément correspondant aux conditions, et non que le service fonctionne normalement. Vérifiez ensemble l'espace de noms, le nom de l'unité, le démarrage, la plage horaire et les permissions.
Lors de l'exportation des messages nécessaires vers un fichier, prenez également en compte les permissions de redirection du shell de l'utilisateur actuel. Voici un exemple de sauvegarde vers un chemin de laboratoire accessible uniquement par root. Les journaux opérationnels réels peuvent contenir des valeurs sensibles telles que des informations utilisateur et des jetons, il est donc recommandé de vérifier le contenu et les permissions avant de les utiliser dans des publications publiques ou pour une diffusion externe.
sudo sh -c 'journalctl --namespace=lf-course24 -b -u lf-course24-batch4.service --no-pager -q -o cat > /root/lf-course24/batch4-export.txt'
sudo wc -l /root/lf-course24/batch4-export.txt
Lors de la vérification, il a été confirmé que le message exporté comportait 300 lignes. Les définitions des filtres ainsi que les options de sortie, de rotation et de nettoyage peuvent être trouvées dans le manuel officiel journalctl .
La signification réelle de la rotation des journaux et des limites de nombre de fichiers
--rotate est l'opération de conversion du fichier actuellement actif en un fichier archivé et d'ouverture d'un nouveau fichier actif. Ne confondez pas la rotation elle-même avec la suppression des journaux précédents. En revanche, --vacuum-files est une commande de nettoyage qui peut supprimer les anciens fichiers archivés. Ce qui suit est exécuté uniquement sur des journaux de pratique dédiés qui peuvent être supprimés.
sudo journalctl --namespace=lf-course24 --disk-usage
sudo journalctl --namespace=lf-course24 --sync
sudo journalctl --namespace=lf-course24 --vacuum-files=1
sudo journalctl --namespace=lf-course24 --disk-usage
Dans le comportement testé de systemd 257, --vacuum-files=1 ne signifiait pas "laisser un fichier archivé". La limite du nombre de fichiers affecte également le fichier actif, mais les opérations de suppression ne s'appliquent qu'aux fichiers archivés. Il existe des cas où il ne peut pas être réduit au nombre spécifié car le fichier actif ne peut pas être supprimé.
Cette pratique a commencé avec un fichier actif et trois fichiers archivés contenant les trois lots précédents. Lorsqu'une limite de nombre de fichiers de 1 a été appliquée, les trois fichiers archivés ont été supprimés, ne laissant que le fichier actif. Les lots 1, 2 et 3 avaient chacun 0 ligne, et le lot 4 dans le fichier actif a été confirmé pour contenir 300 lignes. L'utilisation est passée d'environ 1,5 M à 1 M.
--disk-usage montre l'utilisation réelle des journaux actifs et archivés ensemble. Comme la taille logique du fichier dans la liste des fichiers et l'espace réellement alloué sur le disque peuvent différer, la somme des tailles de fichiers peut varier. Concevez avec les critères de capacité, de période et de nombre ensemble, et stockez séparément les journaux nécessaires avant suppression.
Vérifiez logrotate avec des fichiers séparés et les fichiers de statut.
Utilisez une configuration logrotate séparée pour les journaux de fichiers généraux. Au lieu de vous inscrire dans le /etc/logrotate.d existant ou de partager des fichiers d'état système, ne faites tourner qu'un seul fichier dédié. Si les répertoires suivants existent déjà, examinez-les d'abord sans les écraser.
sudo mkdir -m 750 /var/log/lf-course24
sudoedit /root/lf-course24/logrotate.conf
Le contenu complet du fichier de configuration est le suivant. size 1k détermine au moment de l'exécution si le fichier dépasse la condition de taille, et rotate 2 spécifie de conserver deux fichiers ayant subi une rotation. En incluant le fichier journal actuel, il peut y avoir trois fichiers, il ne faut donc pas confondre cela avec l'option de nombre de fichiers du journal.
/var/log/lf-course24/application.log {
size 1k
rotate 2
compress
missingok
notifempty
create 0640 root root
}
compress compresse les fichiers ayant subi une rotation, et create définit les permissions et la propriété du nouveau fichier journal actuel. missingok permet les fichiers manquants, et notifempty empêche la rotation des fichiers vides. Étant donné que les fichiers pratiques sont écrits par root, utilisez cette propriété, mais ces paramètres ne sont pas nécessairement appliqués aux comptes de service opérationnels réels.
Ouvrez le fichier avec sudoedit /root/lf-course24/write-file.py et enregistrez l'exemple complet pour créer le fichier de test ci-dessous. Le journal actuel avec le contenu existant n'est pas écrasé, et le lot suivant est créé dans le fichier vide après rotation.
import sys
from pathlib import Path
def main():
batch=sys.argv[1]
if batch not in {'1','2','3'}:
raise ValueError('Use lab batch 1 to 3')
path=Path('/var/log/lf-course24/application.log')
if path.exists() and path.stat().st_size:
raise RuntimeError('Refusing to overwrite a nonempty log')
with path.open('w') as stream:
for number in range(20):
stream.write(f'FILE24-BATCH{batch}-{number:02d} '+ 'y'*128+'\n')
path.chmod(0o640)
if __name__=='__main__':
main()
Tout d'abord, créez le lot 1, puis vérifiez uniquement le plan d'exécution en mode debug.
sudo python3 /root/lf-course24/write-file.py 1
sudo sha256sum /var/log/lf-course24/application.log
sudo logrotate --debug --state /root/lf-course24/logrotate.state /root/lf-course24/logrotate.conf
sudo sha256sum /var/log/lf-course24/application.log
Dans cette vérification, les hachages relevés avant et après étaient identiques, et les fichiers compressés et d'état n'ont pas été créés. Même si la sortie de débogage affiche des plans comme renaming ou Creating new state, cela ne signifie pas que les modifications réelles ont été effectuées. L'exécution réelle et les options de fichier d'état sont distinguées dans manuel officiel logrotate .
Maintenant, faites réellement pivoter le lot 1, puis créez et faites pivoter les lots 2 et 3 dans l'ordre. Étant donné qu'il s'agit d'un exercice basé sur la taille, l'option d'exécution forcée n'est pas utilisée.
sudo logrotate --verbose --state /root/lf-course24/logrotate.state /root/lf-course24/logrotate.conf
for batch in 2 3; do
sudo python3 /root/lf-course24/write-file.py "$batch"
sudo logrotate --verbose --state /root/lf-course24/logrotate.state /root/lf-course24/logrotate.conf
done
sudo stat -c '%a %U:%G %s %n' /var/log/lf-course24/application.log /var/log/lf-course24/application.log.1.gz /var/log/lf-course24/application.log.2.gz
sudo gzip -cd /var/log/lf-course24/application.log.1.gz | head -n 1
sudo gzip -cd /var/log/lf-course24/application.log.2.gz | head -n 1
Le résultat réel a été que le fichier actuel faisait 0 octet, avec une permission 640, propriétaire root, avec 20 lignes du lot 3 restant dans .1.gz et 20 lignes du lot 2 restant dans .2.gz. Le lot 1 le plus ancien a été supprimé. Lorsqu'il a été exécuté à nouveau sur le fichier actuel vide, il n'a pas été tourné.
Ce paramètre est la condition que logrotate vérifie lorsqu'il s'exécute. Spécifier size 1k ne garantit pas toujours que le fichier reste en dessous de 1 KiB. Dans le fonctionnement réel, il est nécessaire de vérifier à la fois l'intervalle d'exécution du programme et la quantité générée. Cet exercice est une vérification d'exécution manuelle et n'a pas modifié le minuteur du système ni les paramètres globaux.
Appliquer la rotation aux services en cours d'exécution et nettoyer le laboratoire
Étant donné que le programme de test ponctuel termine l'écriture et se ferme, même si vous renommez le fichier et en créez un nouveau, le lot suivant utilisera le nouveau fichier. Un démon en cours d'exécution en continu peut continuer à écrire dans le fichier précédemment ouvert. Vous devez vérifier la méthode officielle de réouverture/rechargement du service opérationnel et des fonctionnalités telles que postrotate dans logrotate, et vous ne devez pas étendre ce résultat de test à la vérification de la réouverture des journaux par le démon.
copytruncate n'est pas une solution adaptée à tous les programmes. Examinez les conditions dans le manuel, telles que la possibilité de pertes entre les opérations de copie et de coupe. Au lieu de supprimer sans discernement les journaux existants ou d'arrêter de force le service pour éviter des problèmes, vérifiez la méthode de journalisation du service ainsi que les permissions des fichiers, les étiquettes SELinux et le comportement après rotation.
Lors de la fin de l'exercice, arrêtez uniquement l'instance et le socket du journal dédié. Il n'est pas nécessaire d'arrêter le systemd-journald.service par défaut ni rsyslog.
sudo journalctl --namespace=lf-course24 --sync
sudo systemctl stop systemd-journald@lf-course24.service systemd-journald@lf-course24.socket systemd-journald-varlink@lf-course24.socket
sudo cp -a /etc/systemd/journald@lf-course24.conf.d/10-course.conf /root/lf-course24/journald-namespace.conf
sudo rm -- /etc/systemd/journald@lf-course24.conf.d/10-course.conf
sudo rmdir /etc/systemd/journald@lf-course24.conf.d
systemctl is-active systemd-journald rsyslog
Les journaux de test, les fichiers d'exportation et les fichiers d'état sont conservés comme documents d'entraînement si nécessaire. Dans la vérification source, les chemins de journaux et les listes de fichiers journaux dans l'espace de noms dédié ont été vérifiés, et après avoir comparé si les hachages de sauvegarde étaient identiques, seuls les fichiers de configuration réservés à cet exercice ont été retirés. Les paramètres de journal par défaut, les paramètres existants de logrotate, les fichiers de configuration individuels et le fstab correspondaient à ceux avant le travail, et journald par défaut, rsyslog, SSH et le pare-feu étaient actifs.




