HTTP头已经显示200,保存下来的文件却只有一部分,curl最后退出18。200说明服务器发出了什么状态,不能代替整段消息是否完整接收的判断。本文于2026年11月18日用本机服务故意提前结束正文,保留了状态、字节内容与退出码。

把差异放进一个本地样本

两个地址都声明Content-Length为10。/complete实际发送abcdefghij共10字节;/short只发abc共3字节就关闭连接。这是故意构造的不完整响应,代码不能用于生产;实验不会修改任何真实站点。

准备Python 3。将下面完整代码保存为demo_server.py,在终端运行python3 demo_server.py。服务只监听本机19080端口;端口占用时先结束旧实验,或同步改代码与客户端地址。结束时回到服务终端按Ctrl+C。

from http.server import BaseHTTPRequestHandler, ThreadingHTTPServer
import json, time, hashlib
from urllib.parse import urlsplit, parse_qs

class Demo(BaseHTTPRequestHandler):
    protocol_version = "HTTP/1.1"
    def send(self, status, body=b"", headers=None):
        self.send_response(status)
        for key, value in (headers or {}).items():
            self.send_header(key, value)
        if status not in (204, 304):
            self.send_header("Content-Length", str(len(body)))
        self.end_headers()
        self.wfile.write(body)
    def do_GET(self):
        self.send_response(200)
        self.send_header("Content-Type", "text/plain")
        self.send_header("Content-Length", "10")
        self.send_header("Connection", "close")
        self.end_headers()
        self.wfile.write(b"abc" if self.path == "/short" else b"abcdefghij")
        self.wfile.flush()
        self.close_connection = True

ThreadingHTTPServer(("127.0.0.1", 19080), Demo).serve_forever()

另开终端按顺序执行,保留同一目录中的临时文件:

curl -q --noproxy '*' --http1.1 -sS --max-time 5 -i http://127.0.0.1:19080/complete
curl -q --noproxy '*' --http1.1 -sS --max-time 5 -i http://127.0.0.1:19080/short
2026年11月18日本机受控实验记录,非产品界面:已经收到HTTP 200,为什么curl仍报18且文件只有一部分
2026年11月18日本机受控实验记录,非产品界面:已经收到HTTP 200,为什么curl仍报18且文件只有一部分

完整组返回200,正文10字节,curl退出0。短响应组同样先显示200,但只有abc,标准错误提示仍缺7字节,curl退出18。这条记录不能只摘下第一行200,也不能把已保存的3字节当成完整文件继续处理。

curl的18对应传输大小不符合预期。在这个具体样本里,预期长度来自Content-Length,连接提前关闭提供了明确边界。生产里看到同一退出码,仍需保留原始错误和响应字段,不能仅凭数字就断定某台代理或源站有故障。

做下载脚本时,应先检查命令退出状态,再确认文件长度及业务所需的完整性。只判断文件存在,或只根据响应头200更新“下载成功”标志,都会遗漏这类问题。重试时还要处理残留文件,避免把未完成内容直接当作新请求的起点。

本例没有使用Range和断点续传,不是在解释206的正常分段。收到206并且Content-Range与计划一致,和收到200却比声明长度短,是两种不同情况。

与公开抓取结果怎样对照

在蜘蛛抓取中,本次读取公开10字节目标,取得200和10 B的完整基线。该公开目标没有故意断开;不完整响应只发生在后面的127.0.0.1实验,不能把两份独立请求拼成一次故障。

2026年11月18日真实产品截图:保留本次公开目标、默认蜘蛛选项与结果摘要
2026年11月18日真实产品截图:保留本次公开目标、默认蜘蛛选项与结果摘要

对真实地址,可先用网站测速保留外部状态和下载表现,再保存失败客户端的stderr、退出码与实际文件。这些材料对应到同一请求后,才适合继续查传输在哪里结束。