journalctl 查服务日志:从一条报错定位故障根因
上周三凌晨两点,手机一震:线上一个跑了三个月的 Web 服务突然起不来,监控只剩一行“服务启动失败”。没有堆栈,没有 core 文件,只有一句结论。值班的我当时只有一个想法:别急着重启,先把服务“死前最后几分钟”找回来——而答案,全在 journalctl 里。
先看状态,再翻日志
systemctl status 只会告诉你“它死了”,journalctl 才会告诉你“它死之前经历了什么”。定位时我常用的起手式就两条:先执行 journalctl -u nginx.service --since "10 minutes ago",只看最近十分钟的日志;再加 -xe 看带解释的完整上下文。服务名换成自己的,时间窗口按故障时间调整。
实战:跟着时间线找到第一条报错
那次故障里,服务最后一次启动的日志时间线是这样的:
11月07日 02:13:41 nginx: [emerg] bind() to 0.0.0.0:443 failed (98: Address already in use)
11月07日 02:13:41 nginx: configuration file /etc/nginx/nginx.conf test failed
11月07日 02:13:41 systemd[1]: nginx.service: Control process exited, code=exited, status=1/FAILURE
关键在第一行:443 端口被占了。最后一行 status=1 只是“死了”的结论,不是根因。顺着时间线往前翻 30 秒,发现同事新起了一个测试实例也监听了 443。处理办法很直接:ss -tlnp | grep 443 找到占用进程,确认归属后停掉测试实例,再 systemctl start nginx,服务随即恢复。
两个容易掉的坑
坑一:只看最后一屏。报错往往藏在日志中段,最后一行通常只是启动失败的总结。建议先用 journalctl -u 服务名 -p err --since today 把错误级日志过滤出来,再按时间倒着读。
坑二:时间对不上。服务器时区或时钟不同步时,--since 会把关键日志筛掉。先用 date 对一下时间,再用 journalctl --since "2026-11-07 02:00:00" --until "2026-11-07 02:20:00" 把窗口圈定。
一份照着抄的排错清单
1. systemctl status 看退出码和最近几行;2. journalctl -u 服务名 --since "10 minutes ago" 找最后一次启动的日志;3. 沿时间线向上找第一条 ERROR,再往前看 30 秒;4. 按根因处理:端口占用查 ss -tlnp,权限问题看文件属主,磁盘满用 df -h,配置错误用 nginx -t 验证;5. 修好后 systemctl start,并用 journalctl -u 服务名 -f 跟一分钟,确认没有新报错。
服务挂掉时,日志就是它留下的“遗言”。养成习惯:先翻日志再重启,不然你永远不知道它为什么死,下次还会在同一个地方跌倒。
- 点赞
- 收藏
- 关注作者
评论(0)