一次linux syslog日志文件暴增记录

一次linux syslog日志文件暴增记录

  • 大概30M/s 的速度写入
  • 我的磁盘10+分钟就被写满了
问题排查
  • 一开始我也不知道到底哪里的问题
  • 以为是磁盘满了,还删除了一些大文件,删除后磁盘还是
  • df -h命令查看发现磁盘占用100%
  • cd /切换root用户
  • du --max-depth=1 -h输出后发现var/这个目录大小一直在暴增,那么可以确定是它里面的问题
  • 最后找到是/var/log/syslog这个系统日志文件一直暴增(速度大概30M//s)
  • 执行echo > /var/log/syslog后用df -h发现丢失的磁盘空间回来了
要是这样解决就好了
  • 大概过了10+分钟,突然弹出一个磁盘警告
  • df -h发现磁盘有满了(MD)
  • vim /var/log/syslog等了一会才打开,看见全是docker.dockerd...的日志
  • 感觉是docker出问题了,这还不简单,先卸了再说
  • 卸载完,命令行docker命令不存在,好的卸载成功
  • cd /var/log看看,ll -h输出后,syslog还是一动不动地在增加(我崩溃了)
  • cd /var/log发现syslogrw权限
  • 不知道哪里冒出的想法使用chmod删除了w权限(看你还写不)
  • 删除后发现syslog文件还是在增加(MD**************)
  • 没有w都行,那还是还给你吧
docker你整死我了
  • syslog写入的还是docker的问题
  • rm -rf /var/lib/docker删除了Docker镜像、数据等文件
  • df -h还是没有停下来
  • sudo apt-get autoremove docker后好像停止了
  • 一段时间后df -h真的没有增加了
  • 难道是残余的安装包和依赖造成的问题
总结

遇到此类问题
首先找到问题根源,查看日志信息,根据问题来解决,不要像我一样瞎搞哦

发布了53 篇原创文章 · 获赞 12 · 访问量 1万+

猜你喜欢

转载自blog.csdn.net/qq_42874994/article/details/103107889
今日推荐