google搜索结果只能获取10页

ZacGan 发布于 2014/08/21 19:54
阅读 415
收藏 0

小弟新手,目前在研究一下google搜索引擎,想将google搜索结果获取下来,但是发生一个问题就是去到第十页开始就不能再进入下一页。

小弟用的requests模块来拼的url。。

加载中
0
Xsank
Xsank
这个你试着找找规律吧。你拼接的url,你再分页的时候看看变化的是哪个值,比如我刚刚点了两下看到变了的值是start参数,00表示第一页,10表示第二页,依次类推,既然在浏览器上可以,那么模拟浏览器应该是可行的
返回顶部
顶部