journalctl 查服务日志:从一条报错定位故障根因

举报
yd_274862470 发表于 2026/11/07 19:27:41 2026/11/07
【摘要】 上周三凌晨两点,手机一震:线上一个跑了三个月的 Web 服务突然起不来,监控只剩一行“服务启动失败”。没有堆栈,没有 core 文件,只有一句结论。值班的我当时只有一个想法:别急着重启,先把服务“死前最后几分钟”找回来——而答案,全在 journalctl 里。先看状态,再翻日志systemctl status 只会告诉你“它死了”,journalctl 才会告诉你“它死之前经历了什么”。定...

上周三凌晨两点,手机一震:线上一个跑了三个月的 Web 服务突然起不来,监控只剩一行“服务启动失败”。没有堆栈,没有 core 文件,只有一句结论。值班的我当时只有一个想法:别急着重启,先把服务“死前最后几分钟”找回来——而答案,全在 journalctl 里。

先看状态,再翻日志

systemctl status 只会告诉你“它死了”,journalctl 才会告诉你“它死之前经历了什么”。定位时我常用的起手式就两条:先执行 journalctl -u nginx.service --since "10 minutes ago",只看最近十分钟的日志;再加 -xe 看带解释的完整上下文。服务名换成自己的,时间窗口按故障时间调整。

实战:跟着时间线找到第一条报错

那次故障里,服务最后一次启动的日志时间线是这样的:

11月07日 02:13:41 nginx: [emerg] bind() to 0.0.0.0:443 failed (98: Address already in use)
11月07日 02:13:41 nginx: configuration file /etc/nginx/nginx.conf test failed
11月07日 02:13:41 systemd[1]: nginx.service: Control process exited, code=exited, status=1/FAILURE

关键在第一行:443 端口被占了。最后一行 status=1 只是“死了”的结论,不是根因。顺着时间线往前翻 30 秒,发现同事新起了一个测试实例也监听了 443。处理办法很直接:ss -tlnp | grep 443 找到占用进程,确认归属后停掉测试实例,再 systemctl start nginx,服务随即恢复。

两个容易掉的坑

坑一:只看最后一屏。报错往往藏在日志中段,最后一行通常只是启动失败的总结。建议先用 journalctl -u 服务名 -p err --since today 把错误级日志过滤出来,再按时间倒着读。

坑二:时间对不上。服务器时区或时钟不同步时,--since 会把关键日志筛掉。先用 date 对一下时间,再用 journalctl --since "2026-11-07 02:00:00" --until "2026-11-07 02:20:00" 把窗口圈定。

一份照着抄的排错清单

1. systemctl status 看退出码和最近几行;2. journalctl -u 服务名 --since "10 minutes ago" 找最后一次启动的日志;3. 沿时间线向上找第一条 ERROR,再往前看 30 秒;4. 按根因处理:端口占用查 ss -tlnp,权限问题看文件属主,磁盘满用 df -h,配置错误用 nginx -t 验证;5. 修好后 systemctl start,并用 journalctl -u 服务名 -f 跟一分钟,确认没有新报错。

服务挂掉时,日志就是它留下的“遗言”。养成习惯:先翻日志再重启,不然你永远不知道它为什么死,下次还会在同一个地方跌倒。

【声明】本内容来自华为云开发者社区博主,不代表华为云及华为云开发者社区的观点和立场。转载时必须标注文章的来源(华为云社区)、文章链接、文章作者等基本信息,否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0)

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。