计算机网络 / 系统课时
使用 curl 分析 HTTP
使用 curl 分析 HTTP
curl 不只是下载工具,还能把请求方法、首部、正文、超时、重定向和 TLS 握手过程暴露出来。本课将用一组可复现命令构造请求、拆分响应,并按固定顺序定位 HTTP 通信问题。
学习目标
- 使用
curl设置请求方法、首部、JSON 请求体和超时 - 查看状态码、响应首部、重定向链及 TLS 握手信息
- 通过代理发送请求,并识别常见参数风险
构造并拆分一次 HTTP 请求
下面的命令向测试接口发送 JSON,并把响应首部、响应体和统计信息分别保存。--connect-timeout 只限制建立连接的时间,--max-time 则限制整次传输的总时间。
curl --request POST 'https://httpbin.org/anything?source=anystack' \
--header 'Content-Type: application/json' \
--header 'X-Request-ID: <ID>' \
--data '{"name":"curl","enabled":true}' \
--connect-timeout 3 \
--max-time 8 \
--silent \
--show-error \
--dump-header response-headers.txt \
--output response-body.json \
--write-out 'status=%{http_code}\ntime_total=%{time_total}\nremote_ip=%{remote_ip}\n'预期输出
status=200
time_total=<TIME>
remote_ip=<IP>实际耗时和远端地址会变化。响应首部写入 response-headers.txt,JSON 响应写入 response-body.json。--data 本身会让请求使用 POST,这里保留 --request POST 是为了让方法更醒目;分析其他方法时可替换为 PUT、PATCH 或 DELETE。
查看请求、握手与响应细节
-v 会把解析地址、代理连接、TLS 协商、请求行、请求首部和响应首部写到标准错误流。正文仍写到标准输出,因此分析时常用 -o /dev/null 丢弃正文,只保留协议过程。
curl -v \
--http2 \
--tlsv1.2 \
--connect-timeout 3 \
--max-time 8 \
https://httpbin.org/get \
-o /dev/null预期输出
* Connected to httpbin.org (<IP>) port 443
* SSL connection using TLSv<TLS_VERSION> / <CIPHER>
* ALPN: server accepted h2
> GET /get HTTP/2
< HTTP/2 200不同操作系统、curl 版本和服务端配置会改变日志措辞、TLS 版本及密码套件。--tlsv1.2 表示最低接受 TLS 1.2,并不保证最终一定协商为 TLS 1.2;需要限制最高版本时还要配合 --tls-max。
检查重定向链
不加 -L 时,curl 返回第一次响应,适合确认状态码和 Location。加上 -L 后才会继续访问跳转目标;%{num_redirects} 和 %{url_effective} 可用于确认最终结果。
curl --silent --show-error \
--dump-header - \
--output /dev/null \
https://httpbin.org/redirect/1
curl --silent --show-error \
--location \
--output /dev/null \
--write-out 'status=%{http_code}\nredirects=%{num_redirects}\nfinal_url=%{url_effective}\n' \
https://httpbin.org/redirect/1预期输出
HTTP/<VERSION> 302
location: /get
status=200
redirects=1
final_url=https://httpbin.org/get首部名称大小写和 HTTP 版本可能不同。排查登录或支付跳转时,应先执行不带 -L 的命令,再跟随重定向,避免直接跳过关键的 301、302、307 或 308 响应。curl 默认不会把认证信息转发到不同主机,不要为省事随意启用 --location-trusted。
通过代理发送请求
--proxy 指定代理地址,--proxy-user 提供认证信息。密码不宜直接写入脚本或命令历史,可先读入环境变量。下面的 <PORT>、<USER> 和输入的密码都需要替换为实际值。
read -r -s -p 'Proxy password: ' PROXY_PASSWORD
printf '\n'
curl --verbose \
--proxy 'http://127.0.0.1:<PORT>' \
--proxy-user "<USER>:${PROXY_PASSWORD}" \
--connect-timeout 3 \
--max-time 10 \
https://httpbin.org/get \
-o /dev/null预期输出
* Connected to 127.0.0.1 (<IP>) port <PORT>
> CONNECT httpbin.org:443 HTTP/1.1
< HTTP/1.1 200 Connection established
< HTTP/2 200HTTP 代理访问 HTTPS 地址时通常先建立 CONNECT 隧道。若代理不可达,常见结果是 curl: (7) Failed to connect;若认证失败,代理通常返回 407。不要为绕过证书错误长期使用 -k 或 --insecure,它会跳过证书校验,使中间人攻击更难被发现。
建立固定排查顺序
先用 --write-out 确认状态码和耗时,再用 --dump-header 检查响应首部;存在跳转时比较跟随前后的结果;连接或证书异常时再启用 -v;只有确认请求必须经过代理后,才加入代理参数。这样可以减少日志噪声,也避免多个变量同时变化。