Rocky Linux 10 Kurs / Boot- und Netzwerkfehler eingrenzen: Kernel, initramfs und isolierte Tests
Wenn Rocky Linux 10 nicht startet oder nicht über SSH erreichbar ist, müssen Sie zunächst die Stufe identifizieren, an der es gestoppt hat. Die zu überprüfenden Materialien und die Methoden zur Wiederherstellung unterscheiden sich je nach Bootloader-, Kernel-, Initramfs-Problemen und Netzwerkproblemen nach der Anmeldung. Dieses Tutorial hilft Ihnen, die Diagnoseabfolge zu lernen und Fehlererkennung und -wiederherstellung mithilfe einer separaten Initramfs-Datei und isoliertem Netzwerk zu üben.
Identifizieren Sie die zuletzt erfolgreiche Boot-Stufe
Gehen Sie nicht davon aus, dass das Betriebssystem nicht gebootet ist, nur weil die SSH-Verbindung fehlschlägt. Überprüfen Sie den tatsächlichen Bildschirm auf der VM-Konsole oder der Remote-Verwaltungskonsole und notieren Sie die zuletzt angezeigte Nachricht und den Punkt des Fehlers. Überprüfen Sie auch, ob es unmittelbar nach einem Update, nach Änderungen an der Festplatte oder der virtuellen Hardware oder nach Änderungen der Netzwerkkonfiguration aufgetreten ist.
| Beobachteter Zustand | Erste zu prüfende Objekte | Erste Reaktion |
|---|---|---|
| Boot-Gerät oder GRUB-Menü nicht gefunden | Firmware-Boot-Reihenfolge, Festplattenverbindungen, EFI-Boot-Einträge | Überprüfen Sie den Status der virtuellen Hardware/Geräte, ohne die Festplatte zu initialisieren. |
| Hängt oder stürzt sofort nach Kernel-Meldungen ab | Ausgewählter Kernel, virtuelle Hardware, Treiber und Fehlermeldungen | Fehler auf der Konsole beibehalten und prüfen, ob ein einmaliger Start mit einem zuvor installierten Kernel möglich ist. |
| Root-Gerät in der Dracut-Shell nicht gefunden | Root-Gerät, UUID, LVM, Treiber und initramfs | Vergleichen Sie die Geräteerkennung und Boot-Parameter und untersuchen Sie das Initialabbild des entsprechenden Kernels. |
| systemd-Notfallmodus / Einbindungsfehler | fstab, fehlende Festplatten, fehlgeschlagene Mount-Einheiten | Überprüfen Sie die fehlgeschlagene Einheit und die tatsächliche UUID und stellen Sie die Einstellungen vor der Änderung wieder her. |
| Konsolenanmeldung funktioniert, aber SSH-Verbindung schlägt fehl. | Adresse, Routen, DNS, sshd und Firewall | Überprüfen Sie die IP und den abhörenden Port von der Konsole aus und untersuchen Sie schichtweise. |
GRUB ist ein Bootloader, der den Kernel auswählt und ausführt, um zu starten. initramfs ist ein anfängliches Speicher-Dateisystem, das die Treiber und Werkzeuge enthält, die vor der Verwendung des eigentlichen Root-Dateisystems benötigt werden. Zum Beispiel, wenn das Root-Dateisystem auf LVM liegt, ist zuerst der Prozess erforderlich, das Gerät zu finden und das logische Volume zu aktivieren. Die anfängliche Startbeschreibung des Dracut-Projekts erklärt diese Rolle und den Unterschied zwischen nur für Hosts bestimmten Images und generischen Images.
Bevor Wiederherstellungsarbeiten durchgeführt werden, sichern Sie ein gültiges Backup, ein Wartungsfenster und eine Möglichkeit für den Konsolenzugang. Vermeiden Sie es, beliebige Wiederherstellungs- oder Formatierungsbefehle auf einem gemounteten Root-Dateisystem auszuführen oder Sicherheitsfunktionen zuerst zu deaktivieren, nur um Startprobleme zu reduzieren. Speichern Sie zuerst lesbare Protokolle und aktuelle Einstellungen, um sie vor und nach den Änderungen vergleichen zu können.
Diagnosedaten, die gespeichert werden sollten, wenn eine Anmeldung möglich ist
Der folgende Befehl überprüft den aktuellen Kernel, den standardmäßigen Boot-Eintrag, das tatsächliche Root-Mount und fehlgeschlagene Einheiten. uname -r ist der aktuell laufende Kernel und grubby --default-kernel ist der Kernel, der als standardmäßiges Boot-Ziel festgelegt ist. Dass die beiden Werte unterschiedlich sind, deutet nicht sofort auf einen Fehler hin. Möglicherweise haben Sie manuell einen vorherigen Kernel ausgewählt oder haben nach der Installation eines neuen Kernels noch nicht neu gestartet.
uname -r
cat /proc/cmdline
rpm -q kernel-core dracut grubby
sudo grubby --default-kernel
sudo grubby --info=ALL
findmnt /
sudo findmnt --verify --verbose
systemctl --failed --no-pager
sudo journalctl -b -p warning --no-pager
sudo journalctl --list-boots
systemd-analyze time
Wenn vorherige Boot-Datensätze aufgelistet sind, sehen Sie sich die Warnungen für diesen Boot mit sudo journalctl -b -1 -p warning --no-pager an. Wenn kein persistentes Journal vorhanden ist oder der Aufbewahrungszeitraum abgelaufen ist, gibt es möglicherweise keine vorherigen Aufzeichnungen. Auch wenn systemctl --failed leer ist, bedeutet dies nicht, dass es keine Warnungen im Kernel gibt.
Die Quell-VM lief mit 6.12.0-211.74.1.el10_2.x86_64, und der Standard-Kernel war derselbe. Der vorherige Kernel 6.12.0-211.16.1.el10_2.0.1.x86_64 und die Rescue-Einträge waren ebenfalls vorhanden. Dieser Pfad und diese Version sind Beispielprüfungen und keine Werte, die direkt in Ihrer eigenen Umgebung eingegeben werden sollten.
Darüber hinaus wurde beim vorherigen Start ungefähr 4 Minuten 57 Sekunden im Kernel-Stadium und etwa 5 Minuten 22 Sekunden insgesamt aufgezeichnet. Zu dieser Zeit gab es Warnungen über AES-NI-Kryptographie-Operation Selbstprüfungs-Timeouts und Kernel-Warnungen. Betrachten Sie diese Warnungen nicht als normal, nur weil das spätere Login erfolgreich war, oder schreiben Sie sofort die gleichen Symptome einer initramfs-Beschädigung zu. Startzeit, Konsole und Kernel-Logs werden zusammen betrachtet, um den Ort der Verzögerung einzugrenzen.
Vorübergehend mit dem vorherigen Kernel starten und die Ursache eingrenzen.
Wenn das Problem nur beim neuen Kernel nach einem Update auftritt, können Sie den zuvor installierten Kernel auswählen, um einen Vergleich anzustellen. Das Beibehalten des vorhandenen Kernels und die Überprüfung des Updates stehen im Zusammenhang mit den Prozessen, die in Kernel-Update, Neustart und Wiederherstellungsleitfaden behandelt werden. Wenn kein vorheriger Kernel installiert ist, wird davon ausgegangen, dass er im GRUB-Menü nicht erscheint.
- Den aktuellen Konsolenbildschirm aufzeichnen und während der Wartungszeit neu starten. Wenn das Bootloader-Menü ausgeblendet ist, verwenden Sie die Methode, um das Menü in der VM- oder Firmware-Umgebung anzuzeigen.
- Wählen Sie im GRUB-Menü den Eintrag der genauen Kernel-Version aus, bevor der Fehler auftrat. Unterscheiden Sie zwischen dem Rettungs-Eintrag und den regulären früheren Kernel-Einträgen.
- Nach dem Anmelden überprüfen Sie mit
uname -r, dass es sich tatsächlich um eine frühere Version handelt, und prüfen Sie erneut Festplatten, Netzwerk und Dienste. Gehen Sie nicht davon aus, dass ein erfolgreicher Start allein bedeutet, dass alle Geschäftsabläufe normal sind. - Nachdem bestätigt wurde, dass das Problem nur beim neuen Kernel auftritt, untersuchen Sie den Paketstatus, die zugehörigen Treiber und bekannte Probleme. Löschen Sie nicht zuerst den funktionierenden Kernel.
Das einmalige Booten auszuwählen und den Standardkernel zu ändern, sind unterschiedliche Aufgaben. Wenn Sie den Standardkernel ändern müssen, setzen Sie ihn auf den genauen Kernelpfad, der in grubby --info=ALL bestätigt wurde, und notieren Sie den ursprünglichen Standardpfad, damit er wiederhergestellt werden kann. Der Unterschied zwischen der Überprüfung des Standardkernels und der Bestätigung der laufenden Version nach einem Neustart wird ebenfalls in der offiziellen Kernelübung von Rocky Linux erklärt. Die tatsächlich installierte Version und der Dateipfad müssen auf diesem Server separat überprüft werden.
Im Dracut-Shell werden Boot-Parameter und Geräte mit cat /proc/cmdline und lsblk -f verglichen. Wenn LVM-Tools verfügbar sind, prüfen Sie das Root-Volume mit lvs. Wenn ein /run/initramfs/rdsosreport.txt erzeugt wurde, bewahren Sie auch den zugehörigen Fehlerbericht auf. Wenn die Festplatte selbst nicht sichtbar ist, überprüfen Sie den Controller und die Verbindung der virtuellen Festplatte, bevor Sie das Image neu erstellen.
Erkennung der Beschädigung einer separaten initramfs-Datei und deren Neuerstellung.
Die Übungen in diesem Abschnitt werden auf einer dedizierten Rocky Linux 10 VM durchgeführt, die normal startet. Ohne das eigentliche /boot-Image zu ändern, werden nur separate Dateien erstellt. Die ursprüngliche Übung verwendete dracut 107-9.el10_2, und das Fehlschlagen bei der Analyse der falschen Datei sowie die Modulliste des neu generierten Images wurden durch das folgende Verfahren bestätigt.
sudo -i
set -eu
umask 077
test ! -e /var/tmp/lf-course30
install -d -m 700 /var/tmp/lf-course30
k=$(uname -r)
test -d "/usr/lib/modules/$k"
sha256sum "/boot/initramfs-$k.img" > /var/tmp/lf-course30/boot-before.sha256
grubby --default-kernel > /var/tmp/lf-course30/default-before.txt
cp --preserve=all "/boot/initramfs-$k.img" /var/tmp/lf-course30/original.img
lsinitrd -m /var/tmp/lf-course30/original.img
printf 'deliberately invalid LF30 initramfs copy\n' > /var/tmp/lf-course30/broken.img
if lsinitrd -m /var/tmp/lf-course30/broken.img; then
echo 'Unexpected parse success: stop and inspect this test'
exit 1
else
echo 'Expected rejection of the invalid test file'
fi
dracut --force "/var/tmp/lf-course30/rebuilt-$k.img" "$k"
lsinitrd -m "/var/tmp/lf-course30/rebuilt-$k.img"
sha256sum -c /var/tmp/lf-course30/boot-before.sha256
grubby --default-kernel > /var/tmp/lf-course30/default-after.txt
cmp /var/tmp/lf-course30/default-before.txt /var/tmp/lf-course30/default-after.txt
Die falsche Testdatei konnte zusammen mit File format not recognized nicht analysiert werden. Die regenerierte Datei war etwa 39 MiB groß, und die Modulliste wie lvm, rootfs-block, kernel-modules konnte gelesen werden. Die letzte ursprüngliche Prüfsumme war OK, und der Basiskernel war derselbe. Nur die Fähigkeit, die Dateigröße oder die Modulliste zu lesen, beweist nicht, dass das Abbild tatsächlich erfolgreich starten wird. In dieser Übung wurde das neue Abbild weder mit einem Boot-Eintrag verknüpft, noch wurde das System mit dieser Datei neu gestartet.
In dracut --force ist der erste Pfad die Ausgabedatei und der nächste Wert die Zielkernelversion. Konsultieren Sie das dracut-Befehlsmanual und das lsinitrd-Manual . Da die installierte Distributionsversion von der Version in der neuesten Projektdokumentation abweichen kann, überprüfen Sie die derzeit unterstützten Optionen mit dracut --help und lsinitrd --help.
Bedingungen für die Anwendung auf die Wiederherstellung des tatsächlichen Boot-Images
Wenn Sie das initramfs tatsächlich wiederherstellen müssen, sichern Sie zunächst eine Wiederherstellungsshell mit einem zuvor funktionierenden Kernel oder einem vertrauenswürdigen Installationsmedium derselben Serie. Beim Aufrufen des Troubleshooting- oder Rettungsmenüs des Installationsmediums überprüfen Sie den Mount-Pfad und den Lese-/Schreibstatus des bestehenden Systems, wie auf dem Bildschirm angezeigt. Wenn der Pfad als /mnt/sysroot angezeigt wird, überprüfen Sie etc/os-release und die darunterliegenden Mount-Informationen Wechseln Sie nach diesen Prüfungen mit chroot /mnt/sysroot in das installierte System und verwenden Sie dessen Werkzeuge. Sie sollten zunächst sicherstellen, dass die Root-, separate /boot- und EFI-Partitionen mit den richtigen Geräten verbunden sind.
Ein wichtiger Punkt ist, dass uname -r der Wiederherstellungsumgebungsshell der laufende Kernel der Wiederherstellungsumgebung und nicht der installierte Zielkernel sein kann. Vergleichen Sie die installierten /usr/lib/modules, /boot/vmlinuz-* und Starteinträge, um die Version auszuwählen, die wiederhergestellt werden soll. Wenn ein Image in einem normalen Verzeichnis mit demselben Namen erstellt wird, während /boot nicht eingebunden ist, wird die tatsächliche Bootpartition nicht repariert.
Der folgende Block ersetzt eine echte Bootdatei. Führen Sie ihn nur nach Ursachendiagnose, Sicherung und gesichertem Konsolenzugang in der Root-Shell des installierten Systems aus. Dieser Zweig wurde im Quellversuch nicht ausgeführt und ist vom vorherigen Test mit einer separaten Datei zu unterscheiden.
bash <<'RECOVERY'
set -euo pipefail
findmnt /boot
df -h / /boot
df -i / /boot
ls /usr/lib/modules
grubby --info=ALL
read -r -p 'Exact installed target kernel version: ' target_k < /dev/tty
test -n "$target_k"
test -d "/usr/lib/modules/$target_k"
test -f "/boot/vmlinuz-$target_k"
test -f "/boot/initramfs-$target_k.img"
backup="/boot/initramfs-$target_k.img.before-$(date +%Y%m%d-%H%M%S)"
test ! -e "$backup"
cp --preserve=all "/boot/initramfs-$target_k.img" "$backup"
dracut --force "/boot/initramfs-$target_k.img" "$target_k"
lsinitrd -m "/boot/initramfs-$target_k.img"
RECOVERY
test -f überprüft das vorhandene Abbild in diesem Wiederherstellungsszenario. Wenn das Abbild vollständig fehlt, verifizieren Sie zuerst die verfügbare gute Kopie und den Zielkernel und wählen Sie dann ein Verfahren, das für diesen Zustand eines fehlenden Abbilds geeignet ist.
Der Leitfaden zur Neuerstellung von initramfs in Rocky Linux beschreibt, wie das vorhandene Image vor dem Neubau gesichert werden kann. Das obige Blockbeispiel geht davon aus, dass das erwartete separate /boot eingebunden ist und in der Root-Shell des installierten Systems ausgeführt wird. Wenn das aufgezeichnete Layout abweicht, passen Sie die Prüfung an, bevor Sie an ein Schreiben denken. Nach Überprüfung der Ergebnisse verlassen Sie die Wiederherstellungsshell und starten das System neu, um von der Festplatte zu booten, und überprüfen Sie dann den laufenden Kernel, die Einhängung des Root-Dateisystems und die wichtigen Dienste. Wenn es fehlschlägt, versuchen Sie, auf den vorher funktionierenden Kernel zuzugreifen und die gesicherten Dateien und Einstellungen wiederherzustellen. Mischen Sie beim Kopieren nicht die Kernelversion und die Imageversion aus dem Boot-Eintrag.
Wenn der Grund für den Notfallmodus eine zusätzliche fehlende Festplatte oder ein inkorrekter fstab ist, kann das Regenerieren von initramfs das Problem möglicherweise nicht lösen. Der Prozess zur Wiederherstellung der ursprünglichen Einstellungen durch den Vergleich von findmnt --verify, lsblk -f mit den fehlgeschlagenen Mount-Einheiten wird in UUID·fstab automatische Einbindung und Boot-Fehlervermeidung beschrieben . Wählen Sie die Werkzeuge zur Überprüfung und Reparatur des Dateisystems, nachdem Sie den Typ des Dateisystems und den Mount-Status bestätigt haben.
Netzwerkdiagnose, wenn die Anmeldung erfolgreich ist, die Verbindung jedoch nicht funktioniert
Nach der Konsolenanmeldung das Gerät, die Adresse, die Routen, die Namensauflösung und den Status des Dienstempfangs trennen. Eine Adresse zu haben, unterscheidet sich davon, einen Kommunikationspfad zu haben, und die Verbindung über die IP ist eine andere Überprüfung als die Verbindung über den Hostnamen.
ip -br link
ip -br address
ip route
nmcli device status
nmcli -t -f NAME,UUID,DEVICE connection show --active
nmcli device show
getent ahostsv4 www.rockylinux.org
sudo systemctl status sshd --no-pager
sudo ss -lntp
sudo firewall-cmd --get-active-zones
sudo firewall-cmd --list-all
Wenn die Schnittstelle DOWN ist, überprüfen Sie das Kabel, die Verbindung der virtuellen Netzwerkkarte und das entsprechende Profil. Wenn keine IPv4-Adresse vorhanden ist, setzen Sie DHCP oder eine statische Adresse; wenn keine externe Route vorhanden ist, überprüfen Sie das Standardgateway. ip route get 192.0.2.10 zeigt die Route, die der Kernel wählen würde, ohne Pakete zu senden. Ersetzen Sie die Dokumentationsadresse durch das Ziel, das Sie diagnostizieren. Wenn die aktuelle Verwaltungsoberfläche heruntergefahren wird oder das Profil auf einem entfernten SSH-Server deaktiviert wird, geht auch diese Verbindung verloren, daher sollten Konfigurationsänderungen über die Konsole oder nach Sicherstellung einer verifizierten automatischen Wiederherstellungsmethode vorgenommen werden.
Wenn Sie sich über IP und Port verbinden können, aber die Namensauflösung fehlschlägt, beginnen Sie damit, es auf DNS einzugrenzen. Vergleichen Sie die getent-Ergebnisse des Servers mit den DNS-Einstellungen von NetworkManager und dem Pfad der Namensauflösung. Ein einzelner ping-Fehler sollte nicht als Ausfall der gesamten IP-Kommunikation interpretiert werden. Selbst wenn ICMP blockiert ist, können notwendige TCP-Dienste weiterhin kommunizieren. Der sichere Adress- und DNS-Änderungs- und Wiederherstellungsprozess kann in den NetworkManager-Kontrollpunkten und im statischen Adress- und DNS-Tutorial fortgesetzt und überprüft werden.
Selbst wenn sshd normal funktioniert, können Verbindungen fehlschlagen, wenn auf die falsche Adresse zugegriffen wird oder wenn die empfangende Adresse eingeschränkt ist. Stimmen Sie die lokale Empfangsadresse/den Port in ss mit dem tatsächlichen Verbindungsziel ab und prüfen Sie die Firewall basierend auf der Zone, zu der das Gerät gehört. Anstatt die gesamte Firewall auszuschalten, wenn die Ursache unklar ist, vergleichen Sie nur die notwendigen Pfade und Dienste.
Netzwerkfehler- und Wiederherstellungsübungen, die die Verbindungen für den Verwaltungszugang nicht beeinträchtigen.
Ein Netzwerknamespace ist ein isolierter Bereich, der eigene Schnittstellen, Adressen, Routen und so weiter hat. Hier erstellen wir Client- und Serverbereiche innerhalb einer VM und verbinden sie direkt mit einem virtuellen Ethernet-Paar (veth). Management enp0s3 oder das tatsächliche NetworkManager-Profil wird nicht geändert. Python-HTTP-Dienste, die als Server dienen, laufen nur unter dem lfstudent-Konto und nutzen das externe Internet oder DNS nicht.
Führen Sie dies in der im vorherigen Abschnitt geöffneten Administratorshell aus. ip, python3, curl und lfstudent Konten werden benötigt. Wenn Pfade, Namespaces oder Einheiten mit demselben Namen bereits existieren, verwenden Sie sie nicht erneut und löschen Sie sie nicht; brechen Sie stattdessen diese Übung ab.
test ! -e /srv/lf-course30-network
test ! -e /run/netns/lf30-client
test ! -e /run/netns/lf30-server
install -d -m 755 /srv/lf-course30-network
printf 'LF30 network restored\n' > /srv/lf-course30-network/index.html
chmod 644 /srv/lf-course30-network/index.html
ip netns add lf30-client
ip netns add lf30-server
ip link add lf30c netns lf30-client type veth peer name lf30s netns lf30-server
ip -n lf30-client address add 198.18.30.1/30 dev lf30c
ip -n lf30-server address add 198.18.30.2/30 dev lf30s
ip -n lf30-client link set lo up
ip -n lf30-server link set lo up
ip -n lf30-client link set lf30c up
ip -n lf30-server link set lf30s up
systemd-run --unit=lf-course30-network --uid=lfstudent \
--property=Type=exec \
--property=NetworkNamespacePath=/run/netns/lf30-server \
/usr/bin/python3 -m http.server 18030 --bind 198.18.30.2 \
--directory /srv/lf-course30-network
sleep 1
ip netns exec lf30-client curl --fail --silent --max-time 3 \
http://198.18.30.2:18030/
ip -n lf30-client route get 198.18.30.2
Die normale Antwort ist LF30 network restored, und dev lf30c src 198.18.30.1 erscheint im Pfad. Folgendes ist der Vorgang, um nur die Übungsschnittstelle des Clients herunterzufahren.
ip -n lf30-client link set lf30c down
ip -n lf30-client -br address
ip -n lf30-client route
if ip netns exec lf30-client curl --fail --silent --show-error \
--max-time 3 http://198.18.30.2:18030/; then
echo 'Unexpected success: inspect the test'
else
echo "Expected connection failure: $?"
fi
ip -n lf30-client link set lf30c up
ip -n lf30-client route get 198.18.30.2
ip netns exec lf30-client curl --fail --silent --max-time 3 \
http://198.18.30.2:18030/
Im Quellversuch war der Schnittstellenstatus DOWN, obwohl die Adresse erhalten blieb, und die Routeliste war leer. curl konnte mit Exit-Status 7 keine Verbindung herstellen. Nach dem Wiederherstellen kehrten die direkten Verbindungspfade zurück und lasen denselben Inhalt. Dies vergleicht die Ursache und die Wiederherstellungsergebnisse, indem nur der Status eines Links geändert wird, während Service und Adresse unverändert bleiben. Dieses Ergebnis reproduziert keine Prüfungen von DNS, öffentlichem Routing oder externen Firewall-Fehlern.
Bereinigung und Feststellung des Abschlusses der Wiederherstellung
Bevor Sie den Übungs-Namespace löschen, stoppen Sie zuerst alle innerhalb laufenden Dienste. Die unten aufgeführten Löschziele sind nur die beiden in dieser Lektion neu erstellten Namen. Sobald der Namespace entfernt ist, werden auch die darin enthaltenen virtuellen Links bereinigt.
systemctl stop lf-course30-network.service
ip netns delete lf30-client
ip netns delete lf30-server
test ! -e /run/netns/lf30-client
test ! -e /run/netns/lf30-server
ip -br address
systemctl is-active sshd firewalld
getenforce
exit
In der Quell-VM blieben die vorhandenen Boot-Images, Kernel-Dateien, Boot-Einträge, GRUB-Umgebungsdateien sowie fstab, Hosts, administrative NetworkManager-Profile und Firewall-Einstellungs-Hashes unverändert. Der Standardkernel war derselbe, und die Verwaltungsoberfläche, SSH und die Firewall wurden beibehalten. Separat wurden Kopien von initramfs und Übungswebmaterialien zusammen mit Überprüfungsaufzeichnungen aufbewahrt.
Die Abschlusskriterien für die betriebliche Wiederherstellung bestehen nicht darin, dass sich der Konsolenbildschirm geändert hat, sondern darin, dass das System mit dem vorgesehenen Kernel startet, die erforderlichen Festplatten korrekt eingebunden sind und der administrative Zugriff sowie die Arbeitsdienste normal funktionieren. Das Aufzeichnen der angewendeten Änderungen, als normal bestätigter Inspektionen, verbleibender Warnungen und Rücksetzmethoden ermöglicht es Ihnen, die Grundlage für die Beurteilung fortzusetzen, falls derselbe Fehler erneut auftritt.




