网络爬取 电商平台评价信息爬取

天行者lm 发布于 2013/05/03 18:15
阅读 429
收藏 2

请教个人大神   电商的交易评价信息,产品价格信息怎么获取   比如京东的评价信息  尝试用httpclient 但是京东的评价信息都是异步请求的   怎么样可以高效率的获取到内容,提供下思路 

加载中
0
fhp0917
fhp0917
人家的价格是以图片的形式出现的,图片中还带混淆点,就是为了防止别人爬取的
天行者lm
天行者lm
不是所有都是图片 我看了下 淘宝是文本的 其实主要是评价不好获取
0
skjda
skjda

1. 多线程代理;
2. 理清异步请求的次序与需求;
3. 理清Http header cookie的数据;
基本就这些了。

0
数据工厂
数据工厂
电商爬虫,推荐你看一下这个系列的教程:http://blog.csdn.net/youmumzcs/article/details/51373830
返回顶部
顶部