爬虫IP被屏蔽问题

一只骄傲的蜗牛 发布于 04/02 14:41
阅读 268
收藏 0
PHP

最近在做一个爬虫网站 爬取京东或淘宝的数据 筛选出用户想要的某个商品的排名 因为量比较大 IP被京东给屏蔽了 无法获取到数据 请问大佬们这种情况怎么解决 我现在有一个思路 就是哪个客户端发起的请求就用哪个客户端的IP 请问这个思路该怎么实现 爬虫小白请各位大佬指教 感谢

加载中
0
宇润
宇润

购买大量代理IP,每次从池子里随机代理IP,去请求

0
yak
yak

加爬虫群,互相做代理   a爬京东 用b做代理    b爬京东用A做代理

0
孤星闵月
孤星闵月
按你的要求,就是得把爬虫的代码写到JS里面,还有一个思路,把你服务器发起的请求伪装成代理服务器,不知道他们能不能识别出来
0
gavinking
gavinking
买IP池,做浏览器插件
返回顶部
顶部