Linux 与服务器运维 / 系统课时

日志文件太大应该怎么办

日志文件太大应该怎么办

日志文件持续增长会直接消耗磁盘空间,最终可能让服务无法写日志、数据库无法落盘,甚至导致系统异常。本节先确认大日志文件,再使用 logrotate 理解轮转、压缩和保留策略,并学会在真正执行轮转前验证配置。

学习目标

  • 能识别持续增长且占用空间较大的日志文件
  • 理解 logrotate 的轮转、压缩与保留机制
  • 能编写并验证一个基础日志轮转配置

先确认空间到底被谁占用

发现 /var 或根文件系统空间紧张时,不要直接删除正在写入的日志。先确认哪些文件占用空间较大,以及它们是否仍在持续增长。

bash
sudo du -h /var/log/* 2>/dev/null | sort -h | tail -n 10

预期输出

text
<SIZE>    /var/log/<LOG_FILE>
<SIZE>    /var/log/<LOG_DIRECTORY>

<SIZE> 和具体路径取决于当前主机。目录大小明显异常后,还应继续进入对应目录定位文件,而不是仅根据目录汇总结果删除内容。

logrotate 如何控制日志增长

logrotate 不负责产生日志,它负责按照策略处理普通日志文件。达到轮转条件后,当前文件会变成历史文件,旧版本继续后移;根据配置,还可以压缩历史日志并删除超过保留数量的版本。

logrotate 轮转、压缩与保留链路

轮转的价值不是单纯“把文件改名”,而是给日志建立容量上限。轮转频率决定单个文件积累多久,rotate 决定保存多少代,compress 则减少历史文件占用的空间。

配置一个基础轮转策略

假设某应用持续写入 /var/log/myapp/app.log,希望每天轮转,保留 7 个历史版本并压缩旧日志,可以在 /etc/logrotate.d/myapp 中使用下面的配置。

text
/var/log/myapp/app.log {
    daily
    rotate 7
    compress
    delaycompress
    missingok
    notifempty
    create 0640 myapp myapp
}

这是一个完整的 logrotate 配置段,但其中的用户和组 myapp 必须替换为实际运行应用所使用的账户。它的生效行为是:每天满足轮转条件时处理日志,最多保留 7 个历史版本;历史文件启用压缩,但最新的 .1 因 delaycompress 延迟到下一轮再压缩;日志不存在或为空时不会因为该文件产生无意义的轮转。

create 0640 myapp myapp 会在轮转后创建新的日志文件。如果应用不是以该用户运行,或者它需要通过其他方式重新打开日志文件,就不能机械照抄这行配置。

先调试配置再真正轮转

修改配置后,可以使用 -d 进入调试模式。这个模式会读取配置并展示计划执行的动作,但不会真正修改日志文件,适合先检查语法、路径和轮转条件。

bash
sudo logrotate -d /etc/logrotate.d/myapp

预期输出

text
reading config file /etc/logrotate.d/myapp
considering log /var/log/myapp/app.log
<ROTATION_DECISION_AND_DEBUG_DETAILS>

不同 logrotate 版本的调试文字会有差异,关键是确认配置能够被读取、目标路径正确,并观察它判断日志是否需要轮转。-d 不会真正生成 .1 或 .gz 文件,因此不能用它验证磁盘文件已经发生变化。

注意应用如何继续写新日志

轮转后最容易被忽略的问题是:应用进程可能仍然握着旧日志文件的文件描述符。支持日志重新打开的服务通常可以在轮转后通知进程重新打开文件;具体信号或命令取决于该服务自身,不能统一使用同一个 postrotate 命令。

另一种配置是 copytruncate:先复制日志内容,再把原文件截断,因此进程可以继续使用原文件描述符。但复制和截断之间存在短暂窗口,高并发写入时可能丢失少量日志,所以只有应用无法重新打开日志文件时才应评估这种方案。

同时要避免重复轮转。systemd journal 的二进制日志通常由 journald 自己的容量和保留配置管理;某些应用也自带日志轮转。如果应用自身已经负责切分和保留,再叠加一套针对同一文件的 logrotate,反而可能造成命名混乱或日志丢失。正确做法是先确认日志由谁管理,再为普通文件日志建立一套唯一且可验证的轮转策略。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

日志文件太大应该怎么办

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通