华为云 ECS 磁盘写满?用 df、du、find 三步定位,别急着扩容
一、问题背景
用华为云 ECS 跑一段时间,经常会碰到磁盘告警:日志写不进去,软件包装不上,严重时连 No space left on device 都弹出来了。第一反应往往是“盘太小,升配置”,但很多时候盘并没有真的不够大,而是某个目录悄悄堆了大文件,或者一堆小文件把 inode 耗尽了。先花几分钟定位清楚,再决定是清文件还是扩容,比直接掏钱升盘更实在。
二、第一步:df 看整体,先分清是空间满了还是 inode 满了
登进服务器,第一条命令用 df :
df -h
看 Use% 接近 100% 的那一行,确认是哪块盘、哪个挂载点出了问题。根目录 / 满了最常见,但也别只盯 /,/var/log、/var/lib/docker 可能挂在不同的盘上,df -h 能一次把挂载关系看清楚。
同时跑一下:
df -i
这一步容易被跳过,但很关键。如果磁盘容量还有余量,但创建文件仍然报 No space left on device,多半是 inode 用尽了,常见于临时目录或缓存目录里堆了海量小文件。这种情况删几个大文件没有用,需要清理大量小文件。
三、第二步:du 逐层下钻,找到具体是哪个目录在吃空间
确认挂载点之后,用 du 从上往下缩小范围:
du -xh -d 1 / | sort -h
-x 表示不跨文件系统,避免把数据盘的用量算进系统盘;-d 1 只看一层,sort -h 按人类可读大小排序,最后一行就是当前这一层最大的目录。看到哪个目录大了,再进去继续:
du -xh -d 1 /var | sort -h du -xh -d 1 /var/log | sort -h
不要一上来就对整个盘做递归 du,小规格 ECS 上又慢又容易打满磁盘 IO。逐层往下走,通常几步就能锁定真正的“大户”。
常见的占用来源包括:/var/log 下的应用日志和审计日志、Docker 的镜像层和容器日志、/var/cache 里的安装包缓存、/tmp 的临时文件,以及进程崩溃转储文件。
四、第三步:find 直接点名大文件,顺手处理“删了却没释放”的情况
目录锁定到某一层后,用 find 把大文件直接列出来:
find /var -type f -size +500M -exec ls -lh {} \; 2>/dev/null find / -type f -size +1G -exec du -h {} \; 2>/dev/null | sort -rh | head -20
2>/dev/null 屏蔽无权限目录的报错,ls -lh 顺便看到修改时间,方便判断是正在增长的日志还是早就废弃的备份。
还有一种情况容易被漏掉:df 显示盘快满了,但 du 逐层加起来却少了一大截。这通常是有文件已经被删除,但进程还开着文件描述符,内核没有真正释放空间。用下面这条命令查一下:
lsof +L1
输出里名称末尾带 deleted 的,就是“人已经删了,但进程还占着”的文件,记下对应的 PID,重启或 reload 相关进程后空间才会回来。
五、小结
磁盘排查的顺序其实就三步:df 定盘子,du 找目录,find 点名文件。先分清是容量问题还是 inode 问题,再逐层往下钻,最后看一眼有没有“已删除仍占用”的幽灵文件。大部分情况下,清掉一个失控的日志目录或者缓存目录就解决了,不需要升配置。日常运维中,给 /var/log 配上 logrotate、给 Docker 容器设置日志轮转,比等盘满了再救火省事得多。
- 点赞
- 收藏
- 关注作者
评论(0)