requests在抓取页面的时候抓取的速度过快,在页面还没有完全加载完成之前就已经抓取完毕,一些有用的信息不能被抓取到,请问该怎么办!!!!!
用 curl 抓取对比一下
还有就是 request 抓取有些bug,他抓不正常的 chunk 包会有问题(没有0结尾的),
用 curl 抓取对比一下
还有就是 request 抓取有些bug,他抓不正常的 chunk 包会有问题(没有0结尾的),