Debian 13 강좌 / 디스크 부족·inode·열린 삭제 파일과 /tmp 점검

Debian 13에서 파일을 쓸 수 없을 때는 해당 경로의 블록 용량과 inode를 먼저 따로 확인해야 합니다. 파일을 삭제해도 공간이 줄지 않으면 열린 삭제 파일을 확인하고, /tmp 문제라면 루트 디스크와 별개인 tmpfs 한도를 확인합니다. 이 강좌에서는 운영 파일을 지우지 않고 작은 전용 실습 공간에서 세 원인을 비교합니다.

오류가 난 경로부터 확인하기

inode는 파일의 종류·권한·소유자·데이터 위치 같은 정보를 관리하는 파일 시스템의 객체입니다. 내용이 없는 파일도 inode를 사용하므로 바이트 단위 여유가 많아도 새 파일을 만들지 못할 수 있습니다. 반대로 큰 파일 몇 개로 블록만 소진될 수도 있습니다.

다음 명령은 실제로 쓰기에 실패한 경로로 바꾸어 실행합니다. /var/tmp와 /tmp를 한꺼번에 루트 디스크 문제로 판단하지 않는 것이 중요합니다.

findmnt --target /var/tmp -o TARGET,SOURCE,FSTYPE,OPTIONS
df -hT /var/tmp
df -i /var/tmp
sudo du -x -h --max-depth=1 /var | sort -h

findmnt는 경로를 포함하는 실제 마운트를, df는 그 파일 시스템의 공간을 보여 줍니다. df -i는 inode 여유를 확인합니다. du는 접근 가능한 디렉터리 트리에 연결된 파일을 합산하며, -x는 다른 파일 시스템으로 넘어가지 않게 합니다. 권한 오류가 있으면 합계가 불완전하므로 오류를 숨긴 뒤 정확한 값으로 취급하지 않습니다. 큰 트리에서 du를 실행하면 시간이 걸리고 입출력이 발생하므로 문제 경로부터 범위를 좁힙니다.

관찰 결과 우선 확인할 원인 조치 판단
블록 여유가 거의 없고 inode는 남음 큰 파일, 로그, 실제 데이터 증가 소유 서비스와 보관 정책을 확인하고 이동·회전·확장 계획을 세웁니다.
블록은 남고 inode가 없음 매우 많은 작은 파일, 캐시·큐 증가 문제 디렉터리와 생성 원인을 확인한 뒤 애플리케이션의 정리 기능을 사용합니다.
df 사용량이 높지만 du 합계는 작음 열린 삭제 파일, 마운트에 가려진 파일, 권한·집계 범위 차이 같은 파일 시스템과 권한으로 비교한 뒤 프로세스와 마운트 구조를 조사합니다.
/는 여유가 있지만 /tmp 쓰기 실패 별도 tmpfs의 크기·inode 한도 또는 메모리 상태 /tmp의 df·마운트 옵션과 free를 함께 확인합니다.

Permission denied, Read-only file system, Disk quota exceeded는 공간 부족과 다른 단서입니다. 여유가 있어도 소유권·ACL·읽기 전용 마운트·할당량 때문에 실패할 수 있습니다. ext4의 예약 공간과 메타데이터 때문에 df와 파일 내용 크기가 정확히 같을 필요도 없습니다. 용량 표시가 다르다는 사실만으로 손상을 단정하지 않습니다.

4MiB tmpfs에서 블록과 inode 부족 비교하기

별도 Debian 13 실습 VM, sudo 가능한 일반 사용자, Python 3가 필요합니다. 아래 예제는 /tmp를 채우지 않고 최대 4MiB·32 inode의 전용 tmpfs만 만듭니다. tmpfs는 가상 메모리를 사용하고 스왑이 활성화되어 있으면 일부 페이지가 스왑으로 나갈 수 있습니다. 물리 RAM에만 저장된다고 단정하지 않으며, 마운트 해제 시 내용이 사라집니다.

다음 블록은 같은 Bash 터미널에서 실행합니다. 이미 존재하는 경로면 중단하며, 기존 경로를 지우고 계속하지 않습니다. 이 VM에서는 일반 사용자 UID와 GID가 모두 1000이었지만 명령은 현재 계정 값을 사용합니다.

set -euo pipefail
tm=/mnt/lf-space24-tmpfs
if test -e "$tm"; then
    echo "이미 존재하는 경로입니다: $tm" >&2
    exit 1
fi
sudo mkdir "$tm"
sudo mount -t tmpfs -o "size=4M,nr_inodes=32,uid=$(id -u),gid=$(id -g),mode=0700,nosuid,nodev" tmpfs "$tm"
findmnt --mountpoint "$tm"

마운트 결과가 tmpfs이고 size가 4MiB에 해당하는지 확인한 뒤 일반 사용자로 다음 전체 예제를 실행합니다. 쓰기는 최대 8MiB까지만 시도하고, 빈 파일도 최대 40개까지만 시도합니다. 예상한 ENOSPC 오류만 허용하며 다른 오류는 그대로 중단합니다.

python3 - <<'PY'
import errno, pathlib, subprocess
p=pathlib.Path('/mnt/lf-space24-tmpfs')
try:
    with (p/'fill.bin').open('xb') as f:
        for i in range(8):
            f.write(b'x' * 1048576)
            f.flush()
except OSError as e:
    if e.errno != errno.ENOSPC: raise
    print('BLOCK_LIMIT_ENOSPC', flush=True)
else:
    raise RuntimeError('Expected bounded block exhaustion')
subprocess.run(['df','-hT',str(p)],check=True)
subprocess.run(['df','-i',str(p)],check=True)
(p/'fill.bin').unlink()
created=[]
try:
    for i in range(40):
        f=p/f'empty-{i}'
        f.touch(exist_ok=False)
        created.append(f)
except OSError as e:
    if e.errno != errno.ENOSPC: raise
    print('INODE_LIMIT_ENOSPC',len(created),flush=True)
else:
    raise RuntimeError('Expected bounded inode exhaustion')
subprocess.run(['df','-hT',str(p)],check=True)
subprocess.run(['df','-i',str(p)],check=True)
for f in created: f.unlink()
PY

실제 커널 6.12.107·Python 3.13.5 환경에서는 다음처럼 서로 반대되는 결과가 나왔습니다. inode 32개에는 마운트 최상위 디렉터리도 포함되므로 빈 파일은 31개 생성된 뒤 실패했습니다.

실험 블록 사용 inode 사용
fill.bin에 쓰기 4.0MiB / 4.0MiB, 여유 0 2 / 32, 여유 30
fill.bin 삭제 후 빈 파일 생성 사용 0, 여유 4.0MiB 32 / 32, 여유 0

예제가 끝나면 생성한 파일은 삭제됩니다. 중간에 다른 오류로 중단됐다면 먼저 마운트 대상과 안의 파일을 확인합니다. 이 tmpfs는 폐기 가능한 실습 데이터 전용이므로 작업 디렉터리 밖에서 다음 명령으로 해제할 수 있습니다. 사용 중이라는 오류가 나면 이 경로를 현재 디렉터리로 쓰거나 파일을 연 터미널·프로세스를 먼저 정리하고 재시도합니다.

cd "$HOME"
sudo umount /mnt/lf-space24-tmpfs
sudo rmdir /mnt/lf-space24-tmpfs

삭제한 파일의 공간이 남아 있는 이유 확인하기

파일 이름을 삭제하는 unlink 작업과 열린 파일을 닫는 작업은 다릅니다. 디렉터리에서 마지막 이름이 없어져도 프로세스가 열고 있으면 해당 파일의 공간이 유지될 수 있습니다. 로그를 무조건 rm으로 지우면 이 상황을 만들고 조사할 이름까지 잃을 수 있습니다.

다음은 새 64MiB 일반 파일 안에 ext4를 만드는 실습입니다. 실제 디스크 장치를 초기화하지 않습니다. 루트 파일 시스템에 64MiB 이상의 여유와 약간의 추가 작업 공간이 있는지 먼저 확인합니다. 이미 같은 경로가 존재하면 멈추고 그 용도를 조사합니다. 아래 전체 준비 블록도 같은 Bash 터미널에서 실행합니다.

set -euo pipefail
base=/var/lib/lf-space24
em=/mnt/lf-space24-ext4
df -hT /var/lib /mnt
for p in "$base" "$em"; do
    if test -e "$p"; then
        echo "이미 존재하는 경로입니다: $p" >&2
        exit 1
    fi
done
sudo install -d -m 700 "$base"
sudo mkdir "$em"
sudo truncate -s 64M "$base/space.img"
sudo mkfs.ext4 "$base/space.img"
sudo mount -o loop,nosuid,nodev "$base/space.img" "$em"
findmnt --mountpoint "$em"
sudo install -d -o "$(id -u)" -g "$(id -g)" "$em/work"

truncate로 만든 파일은 처음에는 희소 파일이므로 논리 크기 64MiB가 즉시 모두 물리 할당되는 것은 아닙니다. 파일 시스템 메타데이터와 뒤의 실습 쓰기가 실제 공간을 사용합니다. mkfs의 대상은 반드시 방금 만든 space.img이며 /dev/sda 같은 디스크 이름으로 바꾸면 안 됩니다.

ext4의 lost+found는 일반 사용자가 읽지 못할 수 있으므로 소유권을 무작정 바꾸지 않고 별도 work 디렉터리만 측정합니다. 다음 코드는 8MiB 파일을 열어 쓴 뒤 이름을 삭제하고, 같은 프로세스 안에서 열린 파일을 닫기 전후를 비교합니다.

python3 - <<'PY'
import os,pathlib,subprocess
p=pathlib.Path('/mnt/lf-space24-ext4/work')
def used():
    return int(subprocess.check_output(['df','--output=used','-B1',str(p)],text=True).splitlines()[1])
def show(label):
    os.sync()
    print(label,flush=True)
    subprocess.run(['df','-B1',str(p)],check=True)
    subprocess.run(['du','-B1','-s',str(p)],check=True)
baseline=used()
f=(p/'held.bin').open('xb')
for i in range(8): f.write(b'x'*1048576)
f.flush();os.fsync(f.fileno())
show('BEFORE_UNLINK');before=used()
(p/'held.bin').unlink()
print('OPEN_FD',os.readlink(f'/proc/self/fd/{f.fileno()}'),flush=True)
show('UNLINKED_OPEN');held=used()
f.close()
show('AFTER_CLOSE');released=used()
if not (before >= baseline+8388608 and held == before and released < held):
    raise RuntimeError((baseline,before,held,released))
print('DELETED_OPEN_FILE_RELEASE_PASSED',baseline,before,held,released,flush=True)
PY
시점 df 사용 바이트 du work 합계 바이트
8MiB 파일 쓰기 후 8,436,736 8,389,632
이름 삭제, 파일 열림 8,436,736 1,024
파일 닫기 후 48,128 1,024

위 수치는 이 실습 이미지의 실제 측정값으로, 파일 시스템 생성 옵션과 버전에 따라 달라집니다. 중요한 결과는 이름을 삭제한 뒤 du만 줄고 df는 그대로였으며, 닫기 후 df 사용량도 줄었다는 점입니다. /proc/self/fd 출력에는 held.bin (deleted)가 나타났습니다. os.sync는 관찰 전에 쓰기를 동기화할 뿐 열린 파일을 강제로 닫지 않습니다.

운영 서버에서는 파일을 연 프로세스와 서비스의 로그 다시 열기 기능을 확인합니다. lsof가 설치되어 있다면 sudo lsof +L1로 링크 수가 1보다 작은 열린 파일을 조사할 수 있지만, 결과에서 장치·파일·프로세스를 함께 대조해야 합니다. 재시작은 연결과 작업에 영향을 주므로 서비스가 지원하는 로그 회전·재열기 방식을 우선 검토합니다. 다른 프로세스의 /proc 파일 디스크립터에 임의로 쓰거나 프로세스를 바로 종료하는 방식은 사용하지 않습니다.

ext4 검사는 마운트를 해제한 뒤 실행하기

위 실습은 ext4 손상을 만든 것이 아닙니다. 공간이 찼다는 이유만으로 e2fsck를 실행할 필요는 없습니다. Debian e2fsck 설명서는 마운트된 파일 시스템에서의 실행을 경고하며, 일부 읽기 전용 실행이 가능하더라도 그 검사 결과는 유효하지 않을 수 있다고 설명합니다.

이 실습에서는 work 안에 열린 프로세스가 없음을 확인하고 이미지를 해제한 다음 읽기 전용 검사 -fn을 실행합니다. -f는 전체 검사를 강제하고 -n은 변경을 거부하는 읽기 전용 방식입니다. 대상은 실습 이미지 파일 하나입니다.

cd "$HOME"
sudo umount /mnt/lf-space24-ext4
sudo losetup -j /var/lib/lf-space24/space.img
sudo e2fsck -fn /var/lib/lf-space24/space.img

losetup -j 결과는 비어 있어야 합니다. 연결이 남아 있으면 이미지를 삭제하지 말고 어떤 마운트·프로세스가 사용하는지 확인합니다. 정상 실습에서는 e2fsck의 단계별 검사가 끝나고 종료 코드 0이 나왔습니다. 0이 아니면 출력과 종료 코드를 보존하고 바로 파일을 삭제하지 않습니다. 운영 루트의 검사는 콘솔·백업·구조용 부팅 환경을 준비하고 루트가 마운트되지 않은 상태에서 대상 UUID를 다시 확인하는 별도 복구 작업입니다.

검사가 정상 종료한 뒤 실습 이미지만 지웁니다. 기존 데이터 디스크, 앞 강좌의 LVM, /etc/fstab은 수정하지 않습니다.

sudo rm -- /var/lib/lf-space24/space.img
sudo rmdir /var/lib/lf-space24 /mnt/lf-space24-ext4
findmnt --target /tmp -o TARGET,SOURCE,FSTYPE,OPTIONS
df -hT / /tmp /var/tmp

Debian 13의 /tmp와 /var/tmp 보관 조건

Debian 13의 /tmp 변경 안내에 따르면 기본 /tmp는 tmpfs이며 기본 크기 상한은 메모리의 절반입니다. 상한만큼을 시작부터 예약하는 것은 아닙니다. 기존 fstab의 별도 /tmp 설정은 결과를 바꿀 수 있으므로 실제 마운트를 먼저 확인합니다.

findmnt --target /tmp -o TARGET,SOURCE,FSTYPE,OPTIONS
findmnt --target /var/tmp -o TARGET,SOURCE,FSTYPE,OPTIONS
systemctl cat tmp.mount
systemd-tmpfiles --cat-config | less
systemctl cat systemd-tmpfiles-clean.timer
systemctl list-timers systemd-tmpfiles-clean.timer --no-pager
free -h

less에서는 /tmp.conf로 검색하고 q로 종료할 수 있습니다. cat-config는 여러 설정을 보여 주므로 /usr/lib/tmpfiles.d의 기본값만 보지 말고 /etc/tmpfiles.d에서 같은 이름의 파일로 덮어쓴 항목도 확인합니다. 확인 목적으로 systemd-tmpfiles --clean을 실행하지 않습니다. 이 명령은 실제 삭제를 수행할 수 있습니다.

이 강좌의 새 설치 VM에서는 /tmp가 약 2GiB 상한의 tmpfs였고 /var/tmp는 루트 ext4에 포함됐습니다. 적용된 기본 규칙은 /tmp 10d, /var/tmp 30d였으며 정리 타이머는 부팅 후 15분과 마지막 활성화 후 1일 간격으로 설정되어 있었습니다. 날짜가 됐다는 이유로 그 즉시 삭제되는 보장은 없으며 파일의 시간 정보·제외 규칙·타이머 실행 시점이 작용합니다.

Debian의 임시 파일 정리 변경 안내는 새 설치와 업그레이드의 차이도 설명합니다. Debian 12에서 업그레이드한 시스템에는 이전 보관 동작을 유지하는 /etc/tmpfiles.d/tmp.conf가 만들어질 수 있으므로 새 설치와 같은 삭제 주기라고 단정하면 안 됩니다. /var/tmp는 일반적으로 재부팅 후 남지만 영구 보관 장소는 아닙니다.

작고 수명이 짧은 임시 파일은 /tmp를, 더 큰 임시 작업은 여유를 확인한 별도 경로를 선택합니다. 서비스가 TMPDIR 설정을 따르는지 확인한 뒤 바꾸며, 지속 데이터와 백업은 전용 상태·백업 경로에 둡니다. systemd의 임시 디렉터리 사용 지침처럼 공유 임시 디렉터리에서는 mktemp 같은 안전한 생성 방법을 사용합니다. tmpfs 한도와 스왑 동작은 Linux 커널 tmpfs 문서, 정리 규칙의 우선순위와 시간 판정은 Debian tmpfiles.d 설명서에서 확인할 수 있습니다.