df 查看磁盘大小和使用空间的命令 常用的是df -h
du 查看文件或者文件夹大小的命名 常用的是du -sh *
一、问题现象的陈述
1、先列出df的结果
# df -h
Filesystem Size Used Avail Use% Mounted on
/dev/xvda1 20G 17G 2.3G 88% /
tmpfs 1.9G 0 1.9G 0% /dev/shm
/dev/xvdb1 99G 5.7G 88G 7% /mnt
2、du的结果如下
# du -smh /* 2>/dev/null
7.6M /bin
24M /boot
164K /dev
27M /etc
4.0K /home
148M /lib
22M /lib64
16K /lost+found
4.0K /media
5.5G /mnt
8.0K /opt
0 /proc
374M /root
15M /sbin
4.0K /selinux
4.0K /srv
1001M /swap
0 /sys
44K /tmp
3.2G /usr
525M /var
初步对比df检查的系统盘占用大小大于du的执行结果，磁盘去哪里了？
二、原因的排查，这里用的是一个工具lsof
1、lsof的介绍和使用
linux 大量使用了文件。作为系统管理员，lsof 允许您对核心内存进行查看，以找出系统当前如何使用这些文件。lsof 最简单的用法可以告诉您哪些进程打开了哪些文件，以及哪些文件由哪些进程打开。在收集关于应用程序工作情况的信息时，或在进行某些可能损坏数据的操作前确保文件未被使用时，这一点特别重要，lsof 更高级的用法可以帮助您查找删除的文件。
# lsof |grep delete
nginx 1051 nobody 4u REG 202,1 5324800 394886 /usr/local/nginx/proxy_temp/3/77/0005756773 (deleted)
nginx 1051 nobody 24u REG 202,1 131072 394885 /usr/local/nginx/proxy_temp/2/80/0005756802 (deleted)
AliYunDun 22327 root 12uW REG 202,1 0 394241 /tmp/qtsingleapp-aegiss-a5d2-lockfile (deleted)
java 22635 root 1w REG 202,1 11867008131 655390 /usr/local/tomcat/logs/catalina.out (deleted)
java 22635 root 2w REG 202,1 11867008131 655390 /usr/local/tomcat/logs/catalina.out (deleted)
java 22635 root 129r REG 202,1 13774099 658029 /usr/local/tomcat/webapps/ROOT/WEB-INF/lib/elasticsearch-1.5.2.jar (deleted)
java 22635 root 147r REG 202,1 543706 658104 /usr/local/tomcat/webapps/ROOT/WEB-INF/lib/struts.jar (deleted)
java 22635 root 199r REG 202,1 447676 658074 /usr/local/tomcat/webapps/ROOT/WEB-INF/lib/mail-1.4.1.jar (deleted)
最后重启服务器或者程序都可以，建议重启服务器，磁盘空间便可出来
)
