Linux 磁盘有空间但报 No space left on device 是 inode 耗尽了怎么排查？

Question

仓乃文 · Accepted Answer

磁盘明明还有空间，却报 No space left on device，这是 inode 耗尽的典型表现。每个文件（无论大小）都占用一个 inode，大量小文件（如缓存、session、日志碎片）会耗尽 inode，即使磁盘空间充足也无法创建新文件。

问题复现：
```bash
# 创建文件失败
touch test.txt
# touch: cannot touch "test.txt": No space left on device

# 但磁盘空间充足
df -h
# /dev/sda1  100G  30G  70G  30% /

# 查看 inode 使用率
df -i
# Filesystem     Inodes  IUsed   IFree IUse% Mounted on
# /dev/sda1      655360 655350      10  100% /
# IUse% 100%！inode 用完了
```

定位大量小文件：
```bash
# 1. 查看各目录的文件数量
sudo find / -xdev -type d -print0 | \
  xargs -0 -I {} sh -c "echo \$(find {} -maxdepth 1 -type f | wc -l) {}" | \
  sort -rn | head -20

# 2. 常见的小文件重灾区
sudo find /var -type f | wc -l
sudo find /tmp -type f | wc -l
sudo find /var/spool -type f | wc -l
sudo find /var/log -type f | wc -l

# 3. 查找特定类型的文件数量
sudo find / -name "*.sess" -type f | wc -l   # PHP session
sudo find / -name "*.log.*" -type f | wc -l  # 日志碎片
sudo find / -name "*.cache" -type f | wc -l  # 缓存文件
```

清理方案：
```bash
# 1. 清理 PHP session（常见元凶）
sudo find /var/lib/php/sessions -type f -mtime +1 -delete

# 2. 清理旧日志
sudo find /var/log -name "*.log.*" -mtime +7 -delete

# 3. 清理邮件队列
sudo find /var/spool/clientmqueue -type f -delete

# 4. 清理临时文件
sudo find /tmp -type f -mtime +3 -delete

# 5. 批量删除大量文件（find + delete 比 rm 快）
sudo find /path/to/dir -type f -delete
# 如果文件太多 find 也卡，用这个：
cd /path/to/dir && ls | xargs -n 500 rm -f
```

长期方案：
```bash
# 1. 格式化时增加 inode 数量
mkfs.ext4 -i 4096 /dev/sdb1
# 默认每 16384 字节一个 inode，改为 4096 可增加 4 倍

# 2. 使用 XFS 文件系统（inode 动态分配，不会耗尽）
mkfs.xfs /dev/sdb1

# 3. 监控 inode 使用率
df -i | awk "NR>1 && \$5+0 > 80 {print \$0}"

# 4. 定时清理 crontab
0 2 * * * find /tmp -type f -mtime +3 -delete
0 2 * * * find /var/lib/php/sessions -type f -mtime +1 -delete
```

补充说明：
- ext4 的 inode 数量在格式化时确定，无法动态增加
- XFS 的 inode 动态分配，几乎不会出现 inode 耗尽
- PHP session 是最常见的 inode 杀手，务必配置 session 自动清理
- 规则：定期监控 df -i，小文件场景优先用 XFS
- find -delete 比 rm -rf 快得多，且不会参数过长报错