Linux 与服务器运维 / 系统课时
使用管道组合命令
使用管道组合命令
管道让前一个命令的输出直接成为后一个命令的输入,因此可以把筛选、转换、排序和统计拆成多个小命令再连续执行。本节会用一条可运行的流水线完成日志统计,并说明组合命令时最容易忽略的输入输出边界。
学习目标
- 理解管道如何连接命令的标准输出与标准输入
- 使用多个命令组成可读、可验证的文本处理流水线
- 识别标准错误、退出状态和命令顺序带来的常见问题
管道传递的是标准输出
Shell 中的 | 会把左侧命令的标准输出连接到右侧命令的标准输入。右侧命令不需要知道数据来自文件还是其他命令,只要它能从标准输入读取,就可以参与流水线。
例如,grep 负责筛选行,awk 提取字段,sort 排序,uniq -c 统计相邻重复项。每个命令只做一件事,组合后完成更完整的处理。
用一条流水线完成连续处理
下面创建一份小型访问日志,然后统计所有 404 请求对应的路径,并按出现次数从高到低排序。
bash
cat > /tmp/access.log <<'EOF'
200 /index
404 /api
200 /login
500 /api
404 /login
404 /api
EOF
grep '^404 ' /tmp/access.log | awk '{print $2}' | sort | uniq -c | sort -nr预期输出
text
2 /api
1 /login这条流水线按从左到右的逻辑阅读:先保留状态码为 404 的行,再提取第二列路径;随后排序,让相同路径相邻;最后计数并按数字倒序排列。这里 sort 必须放在 uniq -c 之前,因为 uniq 只合并连续出现的重复行。
组合命令时关注边界
流水线最常见的问题不是语法,而是某一段产生的数据格式与下一段期待的不一致。排查时可以从左到右逐段执行,确认每一步的输出,再继续追加后续命令。
还要注意退出状态。普通 Bash 流水线默认以最后一个命令的退出状态作为整条流水线的状态,因此前面的命令失败时可能被掩盖。脚本需要严格失败检测时,可启用 Bash 的 pipefail 选项,让流水线中任意命令的失败都能反映到最终状态。
当你能明确说出“这一段输出什么、下一段读取什么”时,管道就不再只是命令拼接符,而是一条可以逐段验证的数据处理链。
按自己的节奏,确认真正理解。