挂载磁盘空间清理常见问题：如何安全清理已挂载的磁盘分区？

Question

在Linux系统中，如何安全清理已挂载的磁盘分区空间是运维中的常见难题。一个典型问题是：当根目录所在分区（如 `/dev/sda1`）已挂载且使用率超过90%时，直接删除大文件或日志可能引发正在运行的服务异常或数据不一致。例如，误删正在被进程占用的日志文件，虽释放了inode但未立即回收磁盘空间，导致 `df` 与 `du` 统计不符。此外，清理系统缓存、临时文件或旧内核时，若未确认依赖关系，可能导致系统无法启动。因此，如何在不影响服务的前提下，识别并安全清除冗余数据，成为关键挑战。

Answer 1

一、问题背景与核心挑战

在Linux系统运维中，磁盘空间管理是日常工作的关键部分。当根分区（如/dev/sda1）使用率超过90%时，系统稳定性面临风险。直接删除大文件或日志看似简单，但若未充分评估其被进程占用状态或系统依赖关系，可能引发服务中断、数据不一致甚至系统无法启动。

典型现象包括：df 显示空间已满，而 du 统计结果远小于实际占用，这通常是由于文件已被删除但仍有进程持有句柄，导致inode未释放。

二、诊断流程：从表象到根源

1. 执行 df -h 查看各挂载点使用情况，确认高占用分区。
2. 使用 du -sh /* 2>/dev/null | sort -hr | head -10 定位大目录。
3. 检查是否存在被删除但仍被进程占用的文件：
   lsof +L1 可列出所有链接数为0但仍在使用的文件。
4. 分析输出示例：

COMMAND   PID   USER   FD   TYPE DEVICE SIZE/OFF NLINK  NODE NAME
rsyslogd 1234   root    1w   REG  8,1   2876543648      0 12345 /var/log/syslog (deleted)
    

上述表示 rsyslogd 进程仍在写入一个已被删除的日志文件，需重启服务才能真正释放空间。

三、安全清理策略与操作步骤

操作类型	推荐命令	风险等级	适用场景
临时文件清理	find /tmp -type f -atime +7 -delete	低	定期维护
日志轮转处理	logrotate -f /etc/logrotate.conf	中	日志积压
缓存清除	sync; echo 3 > /proc/sys/vm/drop_caches	低	内存缓存过多
旧内核移除	apt purge linux-image-$(uname -r)	高	升级后保留版本过多
僵尸文件释放	kill -HUP $(pgrep rsyslog)	中	deleted日志未释放

四、高级技巧与自动化检测

结合脚本实现空间预警与智能识别：

#!/bin/bash
THRESHOLD=90
CURRENT=$(df / | grep / | awk '{print $5}' | sed 's/%//')

if [ $CURRENT -gt $THRESHOLD ]; then
    echo "Warning: Root partition usage is at ${CURRENT}%"
    echo "Top 10 largest directories:"
    du -Sh / 2>/dev/null | sort -rh | head -10
    echo "Checking for deleted but open files..."
    lsof +L1
fi
    

五、流程图：安全清理决策路径

graph TD
            A[磁盘使用率>90%] --> B{是否为/分区?}
            B -->|是| C[执行du与df比对]
            B -->|否| D[卸载或迁移数据]
            C --> E[lsof +L1检查deleted文件]
            E --> F{存在未释放句柄?}
            F -->|是| G[通知对应服务重启]
            F -->|否| H[定位大文件并评估删除风险]
            H --> I[执行安全删除或压缩归档]
            I --> J[验证df与du一致性]
            J --> K[完成清理]

六、依赖关系与回滚机制

• 删除旧内核前，必须确认当前运行版本：uname -r
• 使用包管理器查询依赖：dpkg --list | grep linux-image
• 保留至少一个可用备用内核，避免启动失败。
• 操作前创建快照（LVM或云平台），确保可快速回滚。
• 修改关键配置前备份：cp /etc/fstab /etc/fstab.bak
• 启用auditd记录敏感操作，便于事后审计。
• 对于生产环境，建议通过Ansible等工具标准化清理流程。
• 设置cron任务自动轮转日志：/etc/cron.daily/logrotate
• 监控工具集成：Prometheus + Node Exporter 实时告警磁盘趋势。
• 利用Btrfs或ZFS文件系统特性，实现快照级空间回收。