【问题记录】 Linux分区磁盘占满，导致ssh登陆闪退

问题描述

今天要去后台看日志查个问题，通过ssh登陆到服务器后准备用平时非常熟悉的less命令打开日志查看，突然xshell客户端就闪退了。一时感觉很蒙，怎么回事？？由于之前有同事遇到类似的问题，提醒我说可能是服务器磁盘满了。一时也没什么其他头绪，我就又登陆到服务器上使用df命令看了下磁盘使用情况：

[root@SHA-L0022452 wls]# df -h
Filesystem            Size  Used Avail Use% Mounted on
devtmpfs              861M  188K  861M   1% /dev
tmpfs                 876M     0  876M   0% /dev/shm
/dev/mapper/V1         17G   17G     0 100% /
/dev/vda1             190M   82M   99M  46% /boot
/dev/mapper/V2        477M  2.5M  449M   1% /home
/dev/mapper/V3        2.9G  426M  2.4G  16% /opt/cloud
/dev/mapper/V4        7.8G   19M  7.4G   1% /tmp
/dev/mapper/V5        25G  1.4G   22G   6% /var
tmpfs                 876M     0  876M   0% /dev/shm
tmpfs                 876M     0  876M   0% /dev/shm

我们发现挂载在/下面的分区/dev/mapper/V1磁盘使用率已经100%。看到这个情况，我感觉ssh登陆闪退的问题很可能就是这个原因导致的。

查找原因

使用du -s /* | sort -nr命令查看哪个目录占用空间大

[root@SHA-L0022452 wll]# du -s /* | sort -nr
4469132 /wll
2626884 /usr
1359352 /var
1014280 /root
469820  /opt
369200  /lib
156208  /app
81624   /boot
31444   /etc
27176   /lib64
14936   /sbin
9436    /bin
210 /home
188 /dev
136 /tmp
16  /lost+found
12  /scripts

发现wll目录占用的空间最大。因此cd到这个目录下再次执行du命令：

du -s /wll/* | sort -nr

使用上面的思路一步步往下找，最后找到一个定时任务日志的目录占用了非常大的空间。将这个目录下的定时任务日志删除。再用df命令看下，分区下的磁盘使用率降下去了。日志也能正常查看了。