日志轮转与磁盘治理实战要点
日志为什么能撑爆磁盘
长期运行的服务若只写不切,单个日志文件可达数十 GB,grep、tail 都会变慢;磁盘写满后,数据库、消息队列会拒绝写入,直接演变成线上事故。治理要同时做两件事:让新日志有地方写,让旧日志按时消失。
用 logrotate 制定轮转策略
Linux 系统自带 logrotate,由 cron 或 systemd timer 每日触发。在 /etc/logrotate.d/ 下新建一份配置:
/var/log/myapp/*.log {
daily
rotate 14
maxsize 100M
compress
delaycompress
missingok
notifempty
copytruncate
}
daily 表示每天切割,rotate 14 保留最近 14 份,maxsize 100M 表示文件超过该大小时即使不到一天也提前切割;compress 压缩归档,delaycompress 延后一轮再压缩,避免应用还在写最新一份。
copytruncate 与文件句柄
应用通常一直持有日志文件句柄,直接 mv 旧文件后,写入仍会落到已删除的 inode,空间不会释放。copytruncate 的做法是复制一份再清空原文件,应用无需改造;代价是复制瞬间写入的少量日志可能丢失,多数业务可以接受。若不允许丢日志,则让应用监听信号重新打开文件,配合 postrotate 脚本:
/var/log/myapp/*.log {
daily
rotate 14
create 0644 app app
postrotate
kill -USR1 $(cat /var/run/myapp.pid)
endscript
}
改完配置先用 logrotate --debug 做干跑验证,再手动 logrotate -f 执行一次确认生效。
磁盘治理的日常动作
巡检:用 df -h 看分区水位,du -sh /var/log/* 定位大目录。
兜底清理:在 crontab 中加一条任务,删除 30 天前的历史日志:
0 3 * * * find /var/log/myapp -mtime +30 -name "*.log" -delete
告警:日志所在分区使用率超过 80% 即告警,留出处置窗口,别等写满才救火。
建议:今天就登录一台线上机器,检查 /etc/logrotate.d/ 中的保留份数与磁盘容量是否匹配,并确认日志分区已配置使用率告警。
- 点赞
- 收藏
- 关注作者
评论(0)