Linux清理磁盘空间常用命令

查看磁盘占用情况

# 查看服务器磁盘空间整体情况    
df -h    
# 查看当前目录，哪个文件占用最大    
du -h --max-depth=1    
# 查看当前目录下各文件及目录占用大小    
du -sh *

按文件类型日期查找文件并删除

# 不加 -maxdepth 则会遍历当前目录下所有子目录中所有文件    
# 找出当前目录下不包含子目录1天之前的 log 文件并删除    
find ./ -maxdepth 1 -name "*.log*" -mtime +0 -exec rm -rf {} ;    
# 找出当前目录下不包含子目录3天之内的 .log 文件并删除    
find ./ -maxdepth 1 -name "*.log*" -mtime -3 -exec rm -rf {} ;

其他参数

-mindepth n: 限定搜索指定目录的最小深度    
-maxdepth n: 限定搜索指定目录的最大深度    
atime 最后一次访问时间, 如 less, more 等, 但 chmod, chown, ls, stat 等不会修改些时间, 使用 ls -utl 可以按此时间顺序查看    
ctime 最后一次状态修改时间, 如 chmod, chown 等状态时间改变但修改时间不会改变, 使用 stat file 可以查看    
mtime 最后一次内容修改时间, 如 vi 保存后等, 修改时间发生改变的话, atime 和 ctime 也相应跟着发生改变    
-ctime -n 查找距现在 n*24H 内修改过的文件    
-ctime n 查找距现在 n*24H 前, (n+1)*24H 内修改过的文件    
-ctime +n 查找距现在 (n+1)*24H 前修改过的文件    
[a|c|m]min [最后访问|最后状态修改|最后内容修改]分钟数(n*min)    
[a|c|m]time [最后访问|最后状态修改|最后内容修改]天数(n*24H)

查看文件目录数量

# 查看当前目录下的文件数量(不包含子目录中的文件)    
ls -l | grep "^-" | wc -l    
# 查看当前目录下的文件数量(包含子目录中的文件)注意：R，代表子目录    
ls -lR | grep "^-" | wc -l    
# 查看当前目录下的目录个数(不包含子目录中的目录)    
ls -l | grep "^d" | wc -l    
# 查看当前目录下的目录数量(包含子目录中的目录)注意：R，代表子目录    
ls -lR | grep "^d" | wc -l    
# 统计所有以"test"开头的目录下的全部文件数量    
ls -lR test*/|grep "^-"| wc -l    
# 统计当前目录下42天前所有文件总共大小(单位字节)    
find ./ -name "*.*" -mtime +42 -exec ls -l {} ;|awk 'BEGIN {SUM=0}{SUM+=$5} END{print SUM}'

找出已经删除但空间未释放的大文件并清空

找出已经删除但磁盘空间未释放的文件，如果文件已经删除，但实际的磁盘空间未释放，这个时候文件句柄 fd 相关信息还在内存中，可以通过 lsof 命令找出，比如打开文件的pid和读写文件的系统fd。

# yum -y install lsof    
# lsof |grep -i delete    
java      20302  5351          hbase    3w      REG              253,1 25778031203      43040 /var/log/hbase/gc.log-201812251535 (deleted)    
java      20302  5354          hbase    3w      REG              253,1 25778031203      43040 /var/log/hbase/gc.log-201812251535 (deleted)    
java      20302  5988          hbase    3w      REG              253,1 25778031203      43040 /var/log/hbase/gc.log-201812251535 (deleted)    
java      20302 12680          hbase    3w      REG              253,1 25778031203      43040 /var/log/hbase/gc.log-201812251535 (deleted)    
java      20302 15047          hbase    3w      REG              253,1 25778031203      43040 /var/log/hbase/gc.log-201812251535 (deleted)    
java      20302 16379          hbase    3w      REG              253,1 25778031203      43040 /var/log/hbase/gc.log-201812251535 (deleted)    
java      20302 16380          hbase    3w      REG              253,1 25778031203      43040 /var/log/hbase/gc.log-201812251535 (deleted)

清空已经删除但未释放的大文件

如果要让大文件彻底删除，通常需要重启打开文件的进程，但是有时在线服务不方便重启，影响服务的可用性。

这个时候可以通过 /proc/${pid}/fd 信息找到打开这个文件的系统 fd，然后通过 fd 来清空文件

# ll /proc/20302/fd/ |grep 201812251535    
l-wx------ 1 hbase hadoop 64 Oct 18 21:02 3 -> /var/log/hbase/gc.log-201812251535 (deleted)    
# 清空文件    
# echo > /proc/20302/fd/3