小白请教抓取网页，预期 404 或者 2M 内的网页，但是突然遇到 300M 的文件，怎么在全部下载完之前识别到？

This topic created in 2011 days ago, the information mentioned may be changed or developed.

curl 试了好像暂时没找到办法！

4 replies • 2020-12-19 23:28:20 +08:00

ysc3839

Dec 19, 2020

你是用 shell 脚本调用 curl 吗？用 --max-filesize 参数。

pinews

Dec 19, 2020

php_curl

谢谢，我试试！

ClericPy

Dec 19, 2020

流式读写? 开始读之前先像楼上说的 Headers 里面看看 content-length

具体什么场景没描述, 就随便回复了下

orcusfox

Dec 19, 2020 via iPhone

curl -X HEAD