Linux服务器系统盘告急：六步化解存储危机

当Linux服务器系统盘空间耗尽时，系统将无法写入新数据，导致服务中断、日志无法记录、甚至系统崩溃。本文将从诊断原因、清理策略、预防措施三个维度，系统化解决这一运维难题。

一、精准诊断：定位空间占用元凶

1. 使用df命令快速查看磁盘使用情况

df -hT

输出示例：

Filesystem     Type      Size  Used Avail Use% Mounted on
/dev/sda1      ext4       50G   48G  1.2G  98% /

重点关注Use%接近100%的分区，特别是根分区/。

2. 使用du命令定位大文件

# 查看当前目录下各文件夹大小（按MB排序）
du -hm --max-depth=1 | sort -nr
# 查找大于100MB的文件
find / -type f -size +100M -exec ls -lh {} \; 2>/dev/null

典型大文件来源：

• 日志文件：/var/log/
• 缓存文件：/var/cache/
• 临时文件：/tmp/
• 数据库文件：/var/lib/mysql/

3. 检查内核日志中的错误

dmesg | grep -i "disk full"

若出现No space left on device错误，则确认是磁盘空间问题。

二、紧急清理：释放关键空间

1. 清理日志文件（安全操作）

# 清理30天前的日志（需安装logrotate）
sudo find /var/log/ -name "*.log" -mtime +30 -exec rm -f {} \;
# 手动清空当前日志文件（保留文件）
sudo truncate -s 0 /var/log/syslog
sudo truncate -s 0 /var/log/kern.log
# 重启日志服务（Systemd系统）
sudo systemctl restart rsyslog

注意：生产环境建议通过logrotate配置自动轮转，而非直接删除。

2. 清理软件包缓存

# Debian/Ubuntu系统
sudo apt-get clean
sudo apt-get autoremove --purge
# RHEL/CentOS系统
sudo yum clean all
sudo package-cleanup --oldkernels --count=1

此操作可释放数百MB至数GB空间。

3. 清理Docker资源（如适用）

# 删除停止的容器
docker rm $(docker ps -aq)
# 删除未使用的镜像
docker rmi $(docker images -f "dangling=true" -q)
# 清理构建缓存
docker builder prune -f

Docker镜像和容器常占用大量空间。

4. 清理临时文件

sudo rm -rf /tmp/*
sudo rm -rf /var/tmp/*

警告：确认无重要进程正在使用/tmp后再执行。

5. 调整数据库日志（如MySQL）

-- MySQL中清理二进制日志
PURGE BINARY LOGS BEFORE DATE_SUB(NOW(), INTERVAL 7 DAY);
-- 调整InnoDB日志文件大小（需修改my.cnf后重启）
[mysqld]
innodb_log_file_size = 256M

三、深度优化：预防空间耗尽

1. 配置日志轮转

编辑/etc/logrotate.conf或子配置文件：

/var/log/syslog {
    daily
    missingok
    rotate 14
    compress
    delaycompress
    notifempty
    create 640 root adm
    postrotate
        invoke-rc.d rsyslog rotate >/dev/null
    endscript
}

2. 设置监控告警

# 使用cron定时检查
echo "0 * * * * root if [ \$(df -h / | awk 'NR==2{print \$5}' | tr -d '%') -gt 90 ]; then echo 'DISK ALERT: / partition is \$(df -h / | awk 'NR==2{print \$5}') full' | mail -s 'Disk Space Alert' admin@example.com; fi" > /etc/cron.d/disk-alert

或使用专业监控工具如Zabbix、Prometheus。

3. 扩展存储空间（终极方案）

LVM扩展（需未使用全部空间）

# 查看卷组信息
sudo vgdisplay
# 扩展逻辑卷（假设为/dev/mapper/ubuntu--vg-ubuntu--lv）
sudo lvextend -l +100%FREE /dev/mapper/ubuntu--vg-ubuntu--lv
sudo resize2fs /dev/mapper/ubuntu--vg-ubuntu--lv

新增磁盘并挂载

# 识别新磁盘（假设为/dev/sdb）
sudo fdisk -l
# 分区并格式化
sudo fdisk /dev/sdb
sudo mkfs.ext4 /dev/sdb1
# 挂载到/data目录
sudo mkdir /data
sudo mount /dev/sdb1 /data
# 添加到/etc/fstab实现开机挂载
echo "/dev/sdb1 /data ext4 defaults 0 2" | sudo tee -a /etc/fstab

四、特殊场景处理

1. 磁盘已满导致无法登录

通过单用户模式或Live CD救援：

1. 重启服务器，在GRUB菜单选择Advanced options > Recovery mode
2. 选择root进入单用户模式
3. 执行清理操作后重启

2. Inode耗尽问题

# 检查inode使用情况
df -i
# 查找大量小文件
find / -xdev -type f | cut -d "/" -f 2 | sort | uniq -c | sort -n
# 解决方案：删除无用小文件或扩展文件系统

五、最佳实践建议

1. 分区规划：生产环境建议将/、/var、/home分开分区
2. 自动清理：配置tmpwatch定期清理临时文件
3. 云服务器：利用云厂商的快照和扩容功能
4. 备份策略：重要数据实施3-2-1备份原则（3份副本，2种介质，1份异地）

结语

Linux服务器系统盘空间管理是运维工作的基础技能。通过建立定期监控、实施日志轮转、合理规划存储结构，可有效避免空间耗尽问题。当问题发生时，按照”诊断-清理-优化-扩展”的步骤处理，既能快速恢复服务，又能从根本上提升系统稳定性。建议将本文提到的检查命令和清理操作纳入日常运维脚本库，实现自动化管理。