使用WebMagic采集的一个问题

开源中国社区酱油哥 发布于 2016/09/25 15:17
阅读 457
收藏 0

我正在使用WebMagic采集zhihu的时候发现一个问题.

zhihu.com使用到了CDN技术,我使用WebMagic调试中发现了SSL握手过程中返回给我的证书,并非是zhihu.com的证书,而是锤子的证书(smartisan.com).

然后我查看Smartisan.com的网站同样使用到了CDN技术,然后最终访问到的IP都是 182.247.229.139. 我使用的是云南的DNS为61.166.150.123;

想问下各位在使用采集过程中,有么有遇到和我同样的问题,如何解决的?

加载中
0
Tupac
Tupac
吃瓜群众表示,应该不会有人回答你的疑难杂症
开源中国社区酱油哥
开源中国社区酱油哥
是啊.问题找到了,不知道怎么解决,也是心累啊.
返回顶部
顶部