webmagic怎么执行翻页

有暗香盈袖呀 发布于 07/04 17:10
阅读 140
收藏 0

我在爬取韩国某电商网时,准备进行翻页获取下一页商品的全部url地址。但是下一页按钮为JavaScript:void(0)我不知道该如何点击。求助各位大佬

加载中
0
Java_常
Java_常

1、先抓取页面有多少页

2、之后拼接到url 作为种子遍历抓取就得了

有暗香盈袖呀
有暗香盈袖呀
回复 @Java_常 : https://www.tradekorea.com 谢谢~
Java_常
Java_常
回复 @有暗香盈袖呀 : 网站多少,我看看:hushed:
Java_常
Java_常
回复 @有暗香盈袖呀 : 会不会看请求?F12 查看请求的post端口 上面应该有page=N 类似的
有暗香盈袖呀
有暗香盈袖呀
url地址是不会变的,翻页的时候
0
草庐过客
草庐过客

这种网上很多,你可以查阅借鉴下

返回顶部
顶部