Rocky Linux 10 講座 / 起動・initramfs・ネットワークの障害を段階ごとに切り分ける

Rocky Linux 10 が起動しない、または SSH でアクセスできない場合、まず停止した段階を特定する必要があります。ブートローダー、カーネル、initramfs の問題、およびログイン後のネットワーク問題では、確認すべき資料や回復方法が異なります。このチュートリアルでは、診断手順を学び、別の initramfs ファイルおよび分離されたネットワークを使用してエラー検出と復旧を実践する方法を紹介します。

最後に成功したブートステージを特定する

SSH接続が失敗したからといって、オペレーティングシステムが起動していないとは仮定しないでください。VMコンソールやリモート管理コンソールで実際の画面を確認し、最後に表示されたメッセージや障害が発生したポイントを記録してください。また、アップデート直後、ディスクや仮想ハードウェアの変更後、ネットワーク設定の変更後のいずれかで発生したかも確認してください。

観察された状態 最初に確認すべきオブジェクト 初期対応
ブートデバイスまたはGRUBメニューが見つからない ファームウェアのブート順序、ディスク接続、EFIブートエントリ ディスクを初期化せずに仮想ハードウェア/デバイスの状態を確認します。
カーネルメッセージの後、すぐにハングまたはパニックになります。 選択されたカーネル、仮想ハードウェア、ドライバー、およびエラーメッセージ コンソール上のエラーを保持し、以前にインストールされたカーネルで一度ブートできるか確認します。
dracutシェルでルートデバイスが見つかりません ルートデバイス、UUID、LVM、ドライバー、およびinitramfs デバイス認識とブートパラメータを比較し、対応するカーネルの初期イメージを調査します。
systemd緊急モード / マウント失敗 fstab、ディスクの欠落、マウントユニットの失敗 失敗したユニットと実際のUUIDを確認し、変更前の設定を復元してください。
コンソールログインは可能ですが、SSH接続は失敗します。 アドレス、ルート、DNS、sshd、ファイアウォール コンソールからIPとリッスンポートを確認し、層ごとに検査します。

GRUBは、カーネルを選択して起動するブートローダーです。initramfsは、実際のルートファイルシステムを使用する前に必要なドライバーやツールを含む初期メモリファイルシステムです。例えば、ルートがLVM上にある場合、まずデバイスを見つけて論理ボリュームを有効化するプロセスが必要です。 dracutプロジェクトの初期ブートの説明は この役割とホスト専用イメージと汎用イメージの違いを説明しています。

回復作業を行う前に、有効なバックアップ、メンテナンスウィンドウ、コンソールアクセス手段を確保してください。マウントされたルートファイルシステムで任意の回復やフォーマットコマンドを実行したり、起動問題を減らすためだけにセキュリティ機能を無効にしたりすることは避けてください。変更前後を比較できるように、まず読み取り可能なログと現在の設定を保存してください。

ログイン可能な場合に保存する診断データ

以下のコマンドは、現在のカーネル、デフォルトのブートエントリ、実際のルートマウント、および失敗したユニットを確認します。uname -r は現在実行中のカーネルであり、grubby --default-kernel はデフォルトのブートターゲットとして設定されたカーネルです。2つの値が異なるからといって、直ちにエラーを示すわけではありません。以前のカーネルを手動で選択した場合や、新しいカーネルインストール後にまだ再起動していない場合などがあります。

uname -r
cat /proc/cmdline
rpm -q kernel-core dracut grubby
sudo grubby --default-kernel
sudo grubby --info=ALL
findmnt /
sudo findmnt --verify --verbose
systemctl --failed --no-pager
sudo journalctl -b -p warning --no-pager
sudo journalctl --list-boots
systemd-analyze time

以前のブート記録がリストされている場合、そのブートの警告を sudo journalctl -b -1 -p warning --no-pager で確認してください。永続的なジャーナルがない場合や保持期間が過ぎている場合、以前の記録が存在しないことがあります。systemctl --failed が空であっても、カーネルに警告がないというわけではありません。

元の検証用VMは6.12.0-211.74.1.el10_2.x86_64で実行されており、デフォルトのカーネルも同じでした。以前のカーネル6.12.0-211.16.1.el10_2.0.1.x86_64およびリスキューエントリも存在していました。このパスとバージョンは例示的なチェックであり、実際の環境に直接入力する値ではありません。

さらに、前回の起動ではカーネル段階で約4分57秒、全体で約5分22秒が記録されました。その時、AES-NI暗号操作の自己チェックタイムアウトやカーネルアラートの警告がありました。後でログインに成功したからといってこれらの警告を正常と考えたり、すぐに同じ症状をinitramfsの破損に結びつけたりしないでください。起動時間、コンソール、カーネルログを合わせて確認することで、遅延箇所を絞り込むことができます。

旧カーネルで一時的に起動して原因を絞る

問題が更新後の新しいカーネルでのみ発生する場合、比較のために以前インストールされたカーネルを選択できます。既存のカーネルを保持し、更新を検証することは、 カーネル更新、再起動、およびリカバリガイド で扱われているプロセスに接続されます。以前のカーネルがインストールされていない場合、GRUBメニューに表示されないと考えられます。

  1. 現在のコンソール画面を記録し、保守時間中に再起動します。ブートローダーメニューが非表示になっている場合は、VMまたはファームウェア環境でメニューを表示する方法を使用してください。
  2. GRUB メニューで、エラーが発生する前の正確なカーネルバージョンの項目を選択します。レスキュー用の項目と通常の以前のカーネル項目を区別してください。
  3. ログイン後、uname -r を使用してそれが以前のバージョンであることを確認し、ディスク、ネットワーク、およびサービスを再確認してください。起動が成功しただけで、すべての業務機能が正常であると仮定しないでください。
  4. 問題が新しいカーネルでのみ再現されることを確認した後、パッケージの状態、関連するドライバー、および既知の問題を調査してください。動作するカーネルを最初に削除しないでください。

一度だけ起動を選択することと、デフォルトのカーネルを変更することは異なる作業です。デフォルトを変更する必要がある場合は、grubby --info=ALLで確認した正確なカーネルパスに設定し、元のデフォルトパスを記録して元に戻せるようにしてください。デフォルトカーネルの確認と、再起動後に実行中のバージョンを検証することの違いについても、 Rocky Linux公式カーネルの実践 で説明されています。実際にインストールされているバージョンとファイルパスは、このサーバー上で別々に確認する必要があります。

Dracutシェルでは、ブートパラメータとデバイスがcat /proc/cmdlineおよびlsblk -fと比較されます。LVMツールが利用可能な場合は、lvsでルートボリュームを確認してください。/run/initramfs/rdsosreport.txtが生成されている場合は、関連するエラーレポートも保存してください。ディスク自体が見えない場合は、イメージを再作成する前にコントローラーと仮想ディスクの接続を確認してください。

別のinitramfsファイルで解析失敗と再生成を確認する

このセクションの演習は、通常通り起動する専用の Rocky Linux 10 VM 上で実行されます。実際の /boot イメージを変更することなく、別のファイルのみが作成されます。元の演習では dracut 107-9.el10_2 が使用され、誤ったファイルの解析失敗と再生成されたイメージのモジュールリストは、以下の手順により確認されました。

sudo -i
set -eu
umask 077
test ! -e /var/tmp/lf-course30
install -d -m 700 /var/tmp/lf-course30
k=$(uname -r)
test -d "/usr/lib/modules/$k"
sha256sum "/boot/initramfs-$k.img" > /var/tmp/lf-course30/boot-before.sha256
grubby --default-kernel > /var/tmp/lf-course30/default-before.txt
cp --preserve=all "/boot/initramfs-$k.img" /var/tmp/lf-course30/original.img
lsinitrd -m /var/tmp/lf-course30/original.img
printf 'deliberately invalid LF30 initramfs copy\n' > /var/tmp/lf-course30/broken.img
if lsinitrd -m /var/tmp/lf-course30/broken.img; then
  echo 'Unexpected parse success: stop and inspect this test'
  exit 1
else
  echo 'Expected rejection of the invalid test file'
fi
dracut --force "/var/tmp/lf-course30/rebuilt-$k.img" "$k"
lsinitrd -m "/var/tmp/lf-course30/rebuilt-$k.img"
sha256sum -c /var/tmp/lf-course30/boot-before.sha256
grubby --default-kernel > /var/tmp/lf-course30/default-after.txt
cmp /var/tmp/lf-course30/default-before.txt /var/tmp/lf-course30/default-after.txt

誤ったテストファイルは File format not recognized と共に解析に失敗しました。再生成されたファイルのサイズは約39 MiBで、lvm、rootfs-block、kernel-modules といったモジュールリストは読み取ることができました。最後の元のチェックサムは OK で、ベースカーネルは同じものでした。ファイルサイズやモジュールリストを読み取ることができるだけでは、イメージが実際に正常に起動することを証明するものではありません。この演習では、新しいイメージはブートエントリにリンクされず、またそのファイルでシステムは再起動されませんでした。

dracut --force では、最初のパスが出力ファイルで、次の値が対象のカーネルバージョンです。 dracut コマンドのマニュアル および lsinitrd マニュアル を参照してください。インストールされているディストリビューションのバージョンはプロジェクトの最新ドキュメントに記載されているバージョンと異なる場合があるため、現在サポートされているオプションを dracut --help および lsinitrd --help で確認してください。

実際のブートイメージ回復に適用する条件

もし実際にinitramfsを復元する必要がある場合は、まず以前に機能していたカーネルまたは同じシリーズの信頼できるインストールメディアを使用してリカバリーシェルを確保してください。インストールメディアのトラブルシューティングまたはリスキューメニューに入る際には、画面に表示される既存システムのマウント場所と読み書き状況を確認してください。もしパスが/mnt/sysrootと表示されている場合は、etc/os-releaseおよびその下のマウント情報を確認し、chroot /mnt/sysrootでインストール済みシステムに入り、その環境のツールを使用してください。まずルート、別の/boot、およびEFIパーティションが正しいデバイスに接続されていることを確認する必要があります。

重要なポイントは、リカバリシェルの uname -r が、インストールされたターゲットカーネルではなく、リカバリ環境の実行中のカーネルである可能性があるということです。インストールされた /usr/lib/modules 、 /boot/vmlinuz-* 、およびブートエントリを比較して、復元するバージョンを選択してください。/boot がマウントされていない間に、同じ名前の通常のディレクトリにイメージが作成された場合、実際のブートパーティションは修正されません。

bash <<'RECOVERY'
set -euo pipefail
findmnt /boot
df -h / /boot
df -i / /boot
ls /usr/lib/modules
grubby --info=ALL
read -r -p 'Exact installed target kernel version: ' target_k < /dev/tty
test -n "$target_k"
test -d "/usr/lib/modules/$target_k"
test -f "/boot/vmlinuz-$target_k"
test -f "/boot/initramfs-$target_k.img"
backup="/boot/initramfs-$target_k.img.before-$(date +%Y%m%d-%H%M%S)"
test ! -e "$backup"
cp --preserve=all "/boot/initramfs-$target_k.img" "$backup"
dracut --force "/boot/initramfs-$target_k.img" "$target_k"
lsinitrd -m "/boot/initramfs-$target_k.img"
RECOVERY

これは実際のブートファイルを置き換える復旧手順です。原因を診断し、バックアップとコンソールを確保した後にのみ適用してください。上記の別ファイルラボとは異なり、元の検証では置き換えコマンドは実行されませんでした。test -f は、この再生成シナリオで既存のイメージを確認します。イメージが完全に欠落している場合は、まず利用可能な良好なコピーとターゲットカーネルを確認し、その欠落イメージの状態に適した手順を選択してください。

Rocky Linux の initramfs 再生成ガイド では、再構築する前に既存のイメージを保持する方法が説明されています。上記のブロックでは、期待される別の /boot がマウントされており、インストール済みシステムのルートシェルで動作していることを前提としています。記録されたレイアウトが異なる場合は、書き込みを検討する前に検査を調整してください。結果を確認した後、リカバリシェルを終了し、システムを再起動してディスクからブートし、実行中のカーネル、ルートマウント、主要なサービスを確認してください。失敗した場合は、以前に動作していたカーネルにアクセスし、保存したファイルと設定を復元してください。カーネルバージョンとイメージバージョンをブートエントリからコピーする際に混同しないでください。

緊急モードの原因が追加のディスクの欠落や誤ったfstabである場合、initramfsを再生成しても解決しないことがあります。失敗したマウントユニットとfindmnt --verify、lsblk -fを比較して元の設定を復元する手順は、 UUID・fstab自動マウントと起動失敗防止ガイド に記載されています。ファイルシステムの種類とマウント状況を確認した後、ファイルシステムチェックおよび修復ツールを選択してください。

ログインは成功するが接続できない場合のネットワーク診断

コンソールログイン後、デバイス、アドレス、ルート、名前解決、サービス受信状況を分けて確認します。アドレスがあることと通信経路があることは異なり、IPでの接続確認とホスト名での接続確認も異なるチェックです。

ip -br link
ip -br address
ip route
nmcli device status
nmcli -t -f NAME,UUID,DEVICE connection show --active
nmcli device show
getent ahostsv4 www.rockylinux.org
sudo systemctl status sshd --no-pager
sudo ss -lntp
sudo firewall-cmd --get-active-zones
sudo firewall-cmd --list-all

インターフェースがDOWNの場合は、ケーブル、仮想NIC接続、および対応するプロファイルを確認してください。IPv4アドレスがない場合は、DHCPまたは静的アドレスを設定してください。外部ルートがない場合は、デフォルトゲートウェイを確認してください。ip route get 192.0.2.10 は、パケットを送信せずにカーネルが選択するルートを表示します。ドキュメントのアドレスは、診断している宛先に置き換えてください。現在の管理インターフェースがダウンした場合、またはリモートSSHサーバーでプロファイルが無効化された場合、その接続も失われるため、コンソールから、または確認済みの自動復旧方法を確保した後に設定変更を行ってください。

IPとポートで接続できるが名前解決に失敗する場合は、まずDNSに絞って確認してください。サーバーのgetentの結果とNetworkManagerのDNS設定および名前解決経路を比較します。単一のpingの失敗で、すべてのIP通信が失敗したとは考えないでください。ICMPがブロックされていても、必要なTCPサービスは通信可能です。安全なアドレスとDNSの変更および復元プロセスは、NetworkManagerのチェックポイント・固定アドレス・DNSの講座で引き続き確認できます。

sshd が正常でも、間違ったアドレスでアクセスした場合や受信アドレスが制限されている場合は接続に失敗することがあります。ss でローカルの受信アドレス/ポートを実際の接続先と一致させ、デバイスが属するゾーンに基づいてファイアウォールを確認してください。原因が不明な場合にファイアウォール全体を停止するのではなく、必要な経路とサービスだけを比較してください。

管理接続を変更せずネットワーク障害と復旧を比較する

ネットワーク名前空間は、自分自身のインターフェース、アドレス、ルートなどを持つ分離された空間です。ここでは、VM内にクライアントとサーバーの空間を作成し、それらを仮想イーサネットペア(veth)で直接接続します。管理enp0s3または実際のNetworkManagerプロファイルは変更されません。サーバーとして動作するPython HTTPサービスはlfstudentアカウント下でのみ実行され、外部のインターネットやDNSは使用しません。

前のセクションで開いた管理者シェルで実行します。ip、python3、curl、およびlfstudentアカウントが必要です。同じ名前のパス、名前空間、またはユニットが既に存在する場合は、既存の項目を再利用・削除せず、この手順を中止して状態を確認してください。

test ! -e /srv/lf-course30-network
test ! -e /run/netns/lf30-client
test ! -e /run/netns/lf30-server
install -d -m 755 /srv/lf-course30-network
printf 'LF30 network restored\n' > /srv/lf-course30-network/index.html
chmod 644 /srv/lf-course30-network/index.html
ip netns add lf30-client
ip netns add lf30-server
ip link add lf30c netns lf30-client type veth peer name lf30s netns lf30-server
ip -n lf30-client address add 198.18.30.1/30 dev lf30c
ip -n lf30-server address add 198.18.30.2/30 dev lf30s
ip -n lf30-client link set lo up
ip -n lf30-server link set lo up
ip -n lf30-client link set lf30c up
ip -n lf30-server link set lf30s up
systemd-run --unit=lf-course30-network --uid=lfstudent \
  --property=Type=exec \
  --property=NetworkNamespacePath=/run/netns/lf30-server \
  /usr/bin/python3 -m http.server 18030 --bind 198.18.30.2 \
  --directory /srv/lf-course30-network
sleep 1
ip netns exec lf30-client curl --fail --silent --max-time 3 \
  http://198.18.30.2:18030/
ip -n lf30-client route get 198.18.30.2

通常の応答は LF30 network restored であり、dev lf30c src 198.18.30.1 がパスに表示されます。以下は、演習用クライアント名前空間のインターフェースだけをダウンさせるプロセスです。

ip -n lf30-client link set lf30c down
ip -n lf30-client -br address
ip -n lf30-client route
if ip netns exec lf30-client curl --fail --silent --show-error \
  --max-time 3 http://198.18.30.2:18030/; then
  echo 'Unexpected success: inspect the test'
else
  echo "Expected connection failure: $?"
fi
ip -n lf30-client link set lf30c up
ip -n lf30-client route get 198.18.30.2
ip netns exec lf30-client curl --fail --silent --max-time 3 \
  http://198.18.30.2:18030/

元の演習では、アドレスは残っているにもかかわらず、インターフェース状態はDOWNであり、ルートリストは空でした。curl は接続に失敗し、終了ステータス7を返しました。インターフェースを復旧させると、直結ルートが戻り、同じ内容を読み取りました。これは、同じサービスとアドレスを維持しながら、リンクの状態を1つだけ変更することで、原因と復旧結果を比較したものです。この結果は、DNS、パブリックルーティング、または外部ファイアウォールの障害の検証を再現するものではありません。

クリーンアップおよび復旧完了の確認

練習用の名前空間を削除する前に、その中で実行されているサービスをまず停止してください。削除対象はこの講義で新たに作成された2つの名前のみです。名前空間が削除されると、その中の仮想リンクも同時にクリーンアップされます。

systemctl stop lf-course30-network.service
ip netns delete lf30-client
ip netns delete lf30-server
test ! -e /run/netns/lf30-client
test ! -e /run/netns/lf30-server
ip -br address
systemctl is-active sshd firewalld
getenforce
exit

元の検証用VMでは、既存のブートイメージ、カーネルファイル、ブートエントリ、GRUB環境ファイル、fstab、hosts、管理用NetworkManagerプロファイル、およびファイアウォール設定のハッシュには変更はありませんでした。デフォルトカーネルは同じで、管理用インターフェース、SSH、およびファイアウォールも維持されました。initramfsと練習用ウェブ資料の別コピーは、検証記録と共に保持されました。

運用回復の完了基準は、コンソール画面が変わったことではなく、システムが意図したカーネルで起動し、必要なディスクが適切にマウントされ、管理者アクセスおよび業務サービスが正常に機能していることです。適用した変更、正常と確認された検査、残っている警告、ロールバック方法を記録することで、同じ障害が再度発生した場合の判断の基礎を引き続き保持することができます。