Linux 日志分析实战:journalctl 定位服务异常

13 ℃ 0 条
内容摘要服务报错时先翻哪个日志?本文从系统日志与 journald 双轨体系讲起,给出 journalctl 按单元、时间、优先级过滤的常用参数,再用 grep 缩小范围、awk 做统计聚合,最后落到服务启动失败与日志膨胀两类高发故障的完整排查顺序,命令均可直接套用。
Linux 日志分析实战:journalctl 定位服务异常

服务突然报错,第一时间该看什么?直接翻 /var/log 逐个文件 grep,效率低还容易漏。journald 接管系统日志后,journalctl 能按服务、时间、优先级精确过滤,配合 grep 与 awk 聚合,几分钟就能锁定异常来源。下面给出可直接套用的日志分析命令。

一、日志体系与 journalctl 基础

1. 系统日志存放与轮转

传统发行版把日志写成 /var/log 下的纯文本:messages 记录系统消息,secure(Debian 系为 auth.log)记录认证事件,Nginx、PHP 各自维护 access.log 与 error.log。这些文件由 logrotate 按天或大小切分,配置在 /etc/logrotate.d/。

systemd 系统还有一套二进制日志,写入 /var/log/journal,只能用 journalctl 读取。它与文本日志并存:journalctl 保留优先级与单元归属,文本日志便于长期归档。

2. journalctl 常用过滤参数

不加参数会输出全部日志,必须按维度过滤:-u 指定单元,--since/--until 限定时间段,-p 过滤级别,-b 只看本次启动。

journalctl -u nginx --since "30 min ago" -p warning   # 单元+时间+级别
journalctl -u php-fpm -b -p err                       # 本次启动以来的错误
journalctl -u mysqld -f                               # 跟踪新日志,类似 tail -f

二、用 grep 与 awk 提取关键信息

1. grep 缩小范围

日志体量大时先用 grep 定位:-n 显示行号,-i 忽略大小写,-C 3 输出前后三行上下文。

grep -niC 3 "error" /var/log/nginx/error.log   # 异常行及上下文
grep -c "203.0.113.10" /var/log/nginx/access.log   # 某 IP 访问次数
grep -v "GET /health" access.log | grep " 500 "    # 排除健康检查,只看 5xx

2. awk 统计聚合

grep 只做筛选,计数与排名靠 awk:把某一列当键累加,再排序输出。

awk '{print $1}' access.log | sort | uniq -c | sort -rn | head   # 访问量 Top10 IP
awk '{print $9}' access.log | sort | uniq -c | sort -rn          # 各状态码次数

三、典型故障定位流程

1. 服务启动失败排查

服务起不来时 systemctl status 只给最后几行,信息不足。紧接着用 journalctl -u 拉完整日志,重点看退出码与依赖报错:端口占用用 ss -lntp 确认监听进程,配置语法错误先用服务自带的 -t 校验。

systemctl status php-fpm --no-pager -l
journalctl -u php-fpm --since "10 min ago" --no-pager
nginx -t                     # 校验配置语法

2. 日志膨胀与轮转配置

日志占满磁盘是高发故障:先定位大文件,再核对 logrotate 策略,systemd 日志用 vacuum 限制体积。

du -sh /var/log/* | sort -rh | head      # 倒序查看日志目录占用
journalctl --vacuum-size=500M           # 限制 systemd 日志在 500M 内
logrotate -d /etc/logrotate.d/nginx     # 干跑验证轮转配置

关键配置提示

  • journalctl 与文本日志并存,排障优先按单元过滤,长期归档靠 logrotate 切分的文本日志。
  • 改完 /etc/logrotate.d/ 一定用 logrotate -d 干跑验证,避免误删正在写入的日志文件。

发表评论 (已有0条评论)

快来评论,快来抢沙发吧~