Linux 与服务器运维 / 系统课时

使用管道组合命令

使用管道组合命令

管道让前一个命令的输出直接成为后一个命令的输入,因此可以把筛选、转换、排序和统计拆成多个小命令再连续执行。本节会用一条可运行的流水线完成日志统计,并说明组合命令时最容易忽略的输入输出边界。

学习目标

  • 理解管道如何连接命令的标准输出与标准输入
  • 使用多个命令组成可读、可验证的文本处理流水线
  • 识别标准错误、退出状态和命令顺序带来的常见问题

管道传递的是标准输出

Shell 中的 | 会把左侧命令的标准输出连接到右侧命令的标准输入。右侧命令不需要知道数据来自文件还是其他命令,只要它能从标准输入读取,就可以参与流水线。

例如,grep 负责筛选行,awk 提取字段,sort 排序,uniq -c 统计相邻重复项。每个命令只做一件事,组合后完成更完整的处理。

用一条流水线完成连续处理

下面创建一份小型访问日志,然后统计所有 404 请求对应的路径,并按出现次数从高到低排序。

bash
cat > /tmp/access.log <<'EOF'
200 /index
404 /api
200 /login
500 /api
404 /login
404 /api
EOF

grep '^404 ' /tmp/access.log | awk '{print $2}' | sort | uniq -c | sort -nr

预期输出

text
      2 /api
      1 /login

这条流水线按从左到右的逻辑阅读:先保留状态码为 404 的行,再提取第二列路径;随后排序,让相同路径相邻;最后计数并按数字倒序排列。这里 sort 必须放在 uniq -c 之前,因为 uniq 只合并连续出现的重复行。

组合命令时关注边界

流水线最常见的问题不是语法,而是某一段产生的数据格式与下一段期待的不一致。排查时可以从左到右逐段执行,确认每一步的输出,再继续追加后续命令。

还要注意退出状态。普通 Bash 流水线默认以最后一个命令的退出状态作为整条流水线的状态,因此前面的命令失败时可能被掩盖。脚本需要严格失败检测时,可启用 Bash 的 pipefail 选项,让流水线中任意命令的失败都能反映到最终状态。

当你能明确说出“这一段输出什么、下一段读取什么”时,管道就不再只是命令拼接符,而是一条可以逐段验证的数据处理链。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

使用管道组合命令

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通