命令行与文本处理 / 系统课时
用 grep 筛选日志关键行
用 grep 筛选日志关键行
排查日志时,通常不是从头阅读整个文件,而是先缩小范围:找出 ERROR、某个请求编号或业务关键字,再查看命中行附近发生了什么。grep 正适合完成这类第一轮筛选,并且可以保留行号和上下文。
学习目标
- 使用
grep按固定关键字和多个条件筛选日志 - 按请求编号定位一条完整调用链中的相关行
- 使用上下文参数查看匹配行前后的日志
先准备一份可验证日志
下面的命令创建一份小型日志,并连续演示三种常见筛选方式。
bash
set -eu
cat > app.log <<'EOF'
2026-09-16 09:00:01 INFO request_id=req-101 start checkout
2026-09-16 09:00:02 INFO request_id=req-101 inventory reserved
2026-09-16 09:00:03 ERROR request_id=req-101 payment timeout
2026-09-16 09:00:04 INFO request_id=req-101 rollback inventory
2026-09-16 09:00:05 INFO request_id=req-102 start checkout
2026-09-16 09:00:06 WARN request_id=req-102 coupon expired
EOF
echo '== ERROR =='
grep -n 'ERROR' app.log
echo '== req-101 =='
grep -n -F 'request_id=req-101' app.log
echo '== ERROR with context =='
grep -n -C 1 'ERROR' app.log预期输出:
text
== ERROR ==
3:2026-09-16 09:00:03 ERROR request_id=req-101 payment timeout
== req-101 ==
1:2026-09-16 09:00:01 INFO request_id=req-101 start checkout
2:2026-09-16 09:00:02 INFO request_id=req-101 inventory reserved
3:2026-09-16 09:00:03 ERROR request_id=req-101 payment timeout
4:2026-09-16 09:00:04 INFO request_id=req-101 rollback inventory
== ERROR with context ==
2-2026-09-16 09:00:02 INFO request_id=req-101 inventory reserved
3:2026-09-16 09:00:03 ERROR request_id=req-101 payment timeout
4-2026-09-16 09:00:04 INFO request_id=req-101 rollback inventory-n 会显示原文件行号,便于继续回到原日志定位。-F 表示把搜索内容当作普通字符串,而不是正则表达式;筛选请求编号、订单号等字面值时更直接。
同时筛选多个关键字
需要找多种严重级别时,可以使用扩展正则 -E。例如同时关注 ERROR 和 WARN:
bash
grep -n -E 'ERROR|WARN' app.log预期输出:
text
3:2026-09-16 09:00:03 ERROR request_id=req-101 payment timeout
6:2026-09-16 09:00:06 WARN request_id=req-102 coupon expired当关键字本身来自用户输入或变量,而且你只想做字面匹配时,优先考虑 -F,这样可以避免 ., *, [ 等字符被当成正则语法。
用上下文还原错误现场
只有错误行往往不足以判断原因。grep 可以把匹配行前后的记录一并输出:
-B N:显示匹配行之前的 N 行-A N:显示匹配行之后的 N 行-C N:前后各显示 N 行
对时间顺序明显的应用日志,-C 很适合快速观察“错误前发生了什么、错误后系统做了什么”。上下文较大时要控制 N,避免重新得到几乎整份日志。
组合条件时先明确匹配语义
日志筛选最容易出错的地方,是把“包含任一关键字”和“必须同时满足多个条件”混在一起。grep -E 'ERROR|timeout' 表示满足任意一个即可;如果要找既属于 req-101 又包含 ERROR 的行,可以串联两次筛选。
bash
grep -F 'request_id=req-101' app.log | grep 'ERROR'预期输出:
text
2026-09-16 09:00:03 ERROR request_id=req-101 payment timeout这种写法易读,适合少量条件。处理很大的日志文件时,则应尽量让前一道筛选尽早缩小数据量。
实际排障时,可以先用错误级别找到异常,再复制同一行中的请求编号做精确筛选,最后用 -C 查看上下文。这个顺序通常比直接堆复杂正则更快,也更容易验证结果是否符合预期。
按自己的节奏,确认真正理解。