计算机网络 / 系统课时

使用 curl 分析 HTTP

使用 curl 分析 HTTP

curl 不只是下载工具,还能把请求方法、首部、正文、超时、重定向和 TLS 握手过程暴露出来。本课将用一组可复现命令构造请求、拆分响应,并按固定顺序定位 HTTP 通信问题。

学习目标

  • 使用 curl 设置请求方法、首部、JSON 请求体和超时
  • 查看状态码、响应首部、重定向链及 TLS 握手信息
  • 通过代理发送请求,并识别常见参数风险

构造并拆分一次 HTTP 请求

下面的命令向测试接口发送 JSON,并把响应首部、响应体和统计信息分别保存。--connect-timeout 只限制建立连接的时间,--max-time 则限制整次传输的总时间。

bash
curl --request POST 'https://httpbin.org/anything?source=anystack' \
  --header 'Content-Type: application/json' \
  --header 'X-Request-ID: <ID>' \
  --data '{"name":"curl","enabled":true}' \
  --connect-timeout 3 \
  --max-time 8 \
  --silent \
  --show-error \
  --dump-header response-headers.txt \
  --output response-body.json \
  --write-out 'status=%{http_code}\ntime_total=%{time_total}\nremote_ip=%{remote_ip}\n'

预期输出

text
status=200
time_total=<TIME>
remote_ip=<IP>

实际耗时和远端地址会变化。响应首部写入 response-headers.txt,JSON 响应写入 response-body.json。--data 本身会让请求使用 POST,这里保留 --request POST 是为了让方法更醒目;分析其他方法时可替换为 PUT、PATCH 或 DELETE。

查看请求、握手与响应细节

-v 会把解析地址、代理连接、TLS 协商、请求行、请求首部和响应首部写到标准错误流。正文仍写到标准输出,因此分析时常用 -o /dev/null 丢弃正文,只保留协议过程。

bash
curl -v \
  --http2 \
  --tlsv1.2 \
  --connect-timeout 3 \
  --max-time 8 \
  https://httpbin.org/get \
  -o /dev/null

预期输出

text
* Connected to httpbin.org (<IP>) port 443
* SSL connection using TLSv<TLS_VERSION> / <CIPHER>
* ALPN: server accepted h2
> GET /get HTTP/2
< HTTP/2 200

不同操作系统、curl 版本和服务端配置会改变日志措辞、TLS 版本及密码套件。--tlsv1.2 表示最低接受 TLS 1.2,并不保证最终一定协商为 TLS 1.2;需要限制最高版本时还要配合 --tls-max。

检查重定向链

不加 -L 时,curl 返回第一次响应,适合确认状态码和 Location。加上 -L 后才会继续访问跳转目标;%{num_redirects} 和 %{url_effective} 可用于确认最终结果。

bash
curl --silent --show-error \
  --dump-header - \
  --output /dev/null \
  https://httpbin.org/redirect/1

curl --silent --show-error \
  --location \
  --output /dev/null \
  --write-out 'status=%{http_code}\nredirects=%{num_redirects}\nfinal_url=%{url_effective}\n' \
  https://httpbin.org/redirect/1

预期输出

text
HTTP/<VERSION> 302
location: /get

status=200
redirects=1
final_url=https://httpbin.org/get

首部名称大小写和 HTTP 版本可能不同。排查登录或支付跳转时,应先执行不带 -L 的命令,再跟随重定向,避免直接跳过关键的 301、302、307 或 308 响应。curl 默认不会把认证信息转发到不同主机,不要为省事随意启用 --location-trusted。

通过代理发送请求

--proxy 指定代理地址,--proxy-user 提供认证信息。密码不宜直接写入脚本或命令历史,可先读入环境变量。下面的 <PORT>、<USER> 和输入的密码都需要替换为实际值。

bash
read -r -s -p 'Proxy password: ' PROXY_PASSWORD
printf '\n'

curl --verbose \
  --proxy 'http://127.0.0.1:<PORT>' \
  --proxy-user "<USER>:${PROXY_PASSWORD}" \
  --connect-timeout 3 \
  --max-time 10 \
  https://httpbin.org/get \
  -o /dev/null

预期输出

text
* Connected to 127.0.0.1 (<IP>) port <PORT>
> CONNECT httpbin.org:443 HTTP/1.1
< HTTP/1.1 200 Connection established
< HTTP/2 200

HTTP 代理访问 HTTPS 地址时通常先建立 CONNECT 隧道。若代理不可达,常见结果是 curl: (7) Failed to connect;若认证失败,代理通常返回 407。不要为绕过证书错误长期使用 -k 或 --insecure,它会跳过证书校验,使中间人攻击更难被发现。

建立固定排查顺序

先用 --write-out 确认状态码和耗时,再用 --dump-header 检查响应首部;存在跳转时比较跟随前后的结果;连接或证书异常时再启用 -v;只有确认请求必须经过代理后,才加入代理参数。这样可以减少日志噪声,也避免多个变量同时变化。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

使用 curl 分析 HTTP

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通