如何查找删除 linux不断增加的垃圾日志文件？

ycnxz 2010-06-09 01:51:28

其实之前发了个贴（http://topic.csdn.net/u/20100520/16/90faf148-0113-4d41-8c40-9fd43bd91aa1.html），然后大致认定出问题那台linux服务器是因为不断增加的日志文件所以被撑满，但是我除了df发现磁盘空间被不断占用之外，不知道是什么位置的什么文件在不断增加，各位有什么好的经验可以教授一下啊。

...全文

2066 25 打赏收藏转发到动态举报

写回复

用AI写文章

25 条回复

切换为时间正序

请发表友善的回复…

发表回复

ycnxz 2010-06-11

打赏
举报

我就只需要那1～2G 传点图片什么的而已

ycnxz 2010-06-11

打赏
举报

[Quote=引用 15 楼 steptodream 的回复:]

你主要的使用：
55G /var
5.4G /usr
5.8G /root
1.1G /proc
55+5.4+5.8+1.1=67.3G

你的df结果显示你的根目录也大约就68G
[root@web ~]# df -l
Filesystem 1K-块已用可用已用% 挂载点
/dev/mapper/VolGroup00-LogVol00
68507184 68……
[/Quote]
这是硬盘被塞满了就这样啊
本来硬盘所剩的空间不多但是也有1～2g的

现在基本上确定是那个web.err的问题了
我刚才删除了硬盘上一个1g多的文件留出新的空间然后再用ll查看web.err文件
相隔一两分钟的结果如下：

…… 2464399774 6月 11 12:43 web.err

…… 2464734364 6月 11 12:46 web.err

steptodream 2010-06-11

打赏
举报

你主要的使用：
55G /var
5.4G /usr
5.8G /root
1.1G /proc
55+5.4+5.8+1.1=67.3G

你的df结果显示你的根目录也大约就68G
[root@web ~]# df -l
Filesystem 1K-块已用可用已用% 挂载点
/dev/mapper/VolGroup00-LogVol00
68507184 68507184 0 100% /
/dev/sda1 101086 14614 81253 16% /boot
none 511800 0 511800 0% /dev/shm

我就不明白了到底哪儿不正常！
我的结论是你的系统正常问题是你本来空间不够用了！/var目录就占用了55G 可是你说是提供下载不算异常
还有你说/usr/local/mysql/var/web.err 这个文件2.3G那么大也不算太大即便是你把整个web.err删除你的系统也就是多出2.3G的空间而已！

ycnxz 2010-06-11

打赏
举报

好像基本有吧

# du -skh /*
6.8M /bin
8.8M /boot
44K /config.guess
36K /config.sub
4.0K /db2.sh
152K /dev
54M /etc
80K /home
8.0K /initrd
101M /lib
20M /lib64
16K /lost+found
8.0K /media
8.0K /misc
8.0K /mnt
8.0K /opt
1.1G /proc
5.8G /root
19M /sbin
8.0K /selinux
8.0K /srv
0 /sys
276K /tmp
5.4G /usr
55G /var

steptodream 2010-06-11

打赏
举报

[Quote=引用 12 楼 ycnxz 的回复:]
du -skh /*
用过了看了个文件夹大小没什么其他文件夹可怀疑的啊
现在没连ssh 不能贴结果上来
[/Quote]
那你把这些文件的大小加起来看看是不是有68G？

ycnxz 2010-06-11

打赏
举报

[Quote=引用 11 楼 steptodream 的回复:]

如果那个日志你不需要的话你可以定时清空
或者通过logrotate每天更新一个世代只保留7天的
-----------
我就说的是你说的那个web.err！

另外我看你的硬盘本来就不大 /var就有55g 剩下也没多少了

另外我不是让你du -skh /*
看看根目录下各目录的大小情况啊
[/Quote]

du -skh /*
用过了看了个文件夹大小没什么其他文件夹可怀疑的啊
现在没连ssh 不能贴结果上来

ycnxz 2010-06-11

打赏
举报

[Quote=引用 24 楼 steptodream 的回复:]

不用再分析啥了
你的系统剩余的空间就那么一点 2G的周转空间能干什么？
你把web.err里清空了万一/var那边有人下载东西或者/var下的各种日志文件也慢慢变多
你要么把var下下载的没用的东西删除要么追加硬盘
你自己想想你把你自己用的windows电脑整个电脑都塞的只剩下2G 你再使用你看你是是什么感觉！
[/Quote]
ok 结贴

steptodream 2010-06-11

打赏
举报

不用再分析啥了
你的系统剩余的空间就那么一点 2G的周转空间能干什么？
你把web.err里清空了万一/var那边有人下载东西或者/var下的各种日志文件也慢慢变多
你要么把var下下载的没用的东西删除要么追加硬盘
你自己想想你把你自己用的windows电脑整个电脑都塞的只剩下2G 你再使用你看你是是什么感觉！

ForestDB 2010-06-11

打赏
举报

用find查找最近出现或者修改过的文件。

ycnxz 2010-06-11

打赏
举报

[Quote=引用 21 楼 steptodream 的回复:]

引用 20 楼 ycnxz 的回复:
用里面网友教我的方法清空了web.err,然后下载最新的web.err,里面被重复写入了以下内容：

Number of processes running now: 0
100611 12:59:54 mysqld restarted
100611 12:59:54 InnoDB: Started; log sequence number 0 4……
[/Quote]
这句什么意思
Can't start server: can't create PID file: No space left on device
我刚刚清空了web.err,硬盘上有2g多空间呢。

steptodream 2010-06-11

打赏
举报

[Quote=引用 20 楼 ycnxz 的回复:]
用里面网友教我的方法清空了web.err,然后下载最新的web.err,里面被重复写入了以下内容：

Number of processes running now: 0
100611 12:59:54 mysqld restarted
100611 12:59:54 InnoDB: Started; log sequence number 0 46523
100611 12:59:54 [ERROR] /usr/local/mysql/libexec/mysqld: Error writing file '/usr/local/mysql/var/web.pid' (Errcode: 28)
100611 12:59:54 [ERROR] Can't start server: can't create PID file: No space left on device
[/Quote]
正常因为你的机器运行相关服务所以日志肯定还会往web.err里写
你定时把他清空就可以了可以添加到crontab 每天清空一次
不过不是长久之计我认为你还是追加个外设硬盘得了

ycnxz 2010-06-11

打赏
举报

其实我就一写php的，公司以前管这方面的人走了，我不得已接手处理一下。
嘿嘿，多谢大家！

ycnxz 2010-06-11

打赏
举报

[Quote=引用 18 楼 steptodream 的回复:]

引用 17 楼 ycnxz 的回复:

我就只需要那1～2G 传点图片什么的而已

那你就把web.err清空把

不过你这样的系统我第一次看到把硬盘塞的慢慢的

我在想难道不会影响你的系统效率么
[/Quote]
我昨天另发了一个贴(http://topic.csdn.net/u/20100610/17/70fc829f-f0a0-45d1-a792-09595261f60d.html)
用里面网友教我的方法清空了web.err,然后下载最新的web.err,里面被重复写入了以下内容：

Number of processes running now: 0
100611 12:59:54 mysqld restarted
100611 12:59:54 InnoDB: Started; log sequence number 0 46523
100611 12:59:54 [ERROR] /usr/local/mysql/libexec/mysqld: Error writing file '/usr/local/mysql/var/web.pid' (Errcode: 28)
100611 12:59:54 [ERROR] Can't start server: can't create PID file: No space left on device

steptodream 2010-06-11

打赏
举报

[Quote=引用 17 楼 ycnxz 的回复:]

我就只需要那1～2G 传点图片什么的而已
[/Quote]
那你就把web.err清空把

不过你这样的系统我第一次看到把硬盘塞的慢慢的

我在想难道不会影响你的系统效率么

steptodream 2010-06-10

打赏
举报

如果那个日志你不需要的话你可以定时清空
或者通过logrotate每天更新一个世代只保留7天的
-----------
我就说的是你说的那个web.err！

另外我看你的硬盘本来就不大 /var就有55g 剩下也没多少了

另外我不是让你du -skh /*
看看根目录下各目录的大小情况啊

ycnxz 2010-06-10

打赏
举报

[Quote=引用 8 楼 steptodream 的回复:]

汗我把回复回到你那个已经结的帖子上了你看看
[/Quote]
看了
忘记说明了
/var 大概有55g大
有个/var/……/down 文件夹大概就占46g
还有个 /var/……/doc 5.7g
还有个 /var/……/html 2.0g
因为这个服务器是用来提供文件下载的
所以我不太怀疑/var 文件夹了

你说：
如果那个日志你不需要的话你可以定时清空
或者通过logrotate每天更新一个世代只保留7天的

可现在问题是
1.我还是不确定知道哪些是日志文件
2.那些可能有日志文件的文件夹都不大也就最大几十m，上百m而已。
3.刚才通过ll命令看了那个web.err：
-rwxr-x--- 1 mysql mysql 2464272384 6月 10 16:39 web.err
好像这个文件一直在被修改还是什么的所以我更怀疑是这个文件在一直增大，直到撑满硬盘。

steptodream 2010-06-10

打赏
举报

[Quote=引用 7 楼 ycnxz 的回复:]

引用 3 楼 liucy1983 的回复:

尝试使用find /tmp -size +100000000c命令查找一下你磁盘中大于100M的文件

find /tmp -size +100000000c执行任何结果都没有怎么回事？
[/Quote]
他这个命令是在/tmp目录下找大于100M的文件如果没有就不会有结果输出

steptodream 2010-06-10

打赏
举报

汗我把回复回到你那个已经结的帖子上了你看看

ycnxz 2010-06-10

打赏
举报

[Quote=引用 3 楼 liucy1983 的回复:]

尝试使用find /tmp -size +100000000c命令查找一下你磁盘中大于100M的文件
[/Quote]
find /tmp -size +100000000c执行任何结果都没有怎么回事？

ycnxz 2010-06-10

打赏
举报

今天检查了服务器
好像/var 下没有什么文件可疑所有 log message 这类文件都不是很多十几m到百来M之间
反正我就用du 命令到处看倒是发现/usr/local/mysql/var/web.err 这个文件最可疑，有2.3g那么大而其他数据库的文件才几m或是几十m 最大才30m大概

所以我现在最主要怀疑是 web.err在不断增大
哪位高人有什么解决方法指教么？