2014-08-07 11:02

引用来自“纵使有花兼明月何堪无酒亦无人”的评论

一方面是360不遵守协议。一方面是百度歧视。允许其他搜索引擎抓就不让360抓。其实可以告百度利用垄断歧视360。反正他们公关都厉害。 就看看谁的公关更厉害

引用来自“飞炀”的评论

淘宝不允许百度搜索爬它,却允许一淘之类的比价网站爬数据,也没见百度硬要去爬啊。同样京东不让一淘爬数据,却让惠惠网之类的比价网站爬,也没见一淘硬爬人家数据。

引用来自“纵使有花兼明月何堪无酒亦无人”的评论

就算爬淘宝也不好爬。淘宝都是异步加载的。还得专门给淘宝开发一个算法

引用来自“飞炀”的评论

这不是好爬不好爬的问题,这是态度问题...既然搜索引擎,我觉得就应该遵守robots,不遵守,就不要在别人告的时候搞的自己多弱势似的,别人不遵守不是它不遵守的借口。就好比一个人去偷东西,被抓了,他就说别人能偷为啥我不能偷,警察会因为这个不罚他么。

引用来自“纵使有花兼明月何堪无酒亦无人”的评论

如果经常发现这两个都是小偷呢?一个小偷偷了另外一个小偷的东西
这是两个案件好吗,因为别人的东西是赃物,他就去偷回来据为己有....偷东西的行为就是违法的...不管你偷的是啥.
2014-08-07 09:53

引用来自“红薯”的评论

这个问题贼扯淡,人家完全可以伪装成正常浏览器用户,然后对你的 Robots 置之不理。OSC 天天被这么干!

引用来自“大师兄悟空”的评论

红薯扯淡。。。。 道德规范。。。。道德规范。。。 你看你丫的素质了 , 就你这伪装成正常浏览器的素质 很难做成一个有道德的人!!

引用来自“红薯”的评论

osc天天被伪装成正常浏览器的爬虫搞,拜托你能看清楚再发表评论吗
原谅这猴子吧,这天太热,踢被子很正常
2014-08-07 08:19
HTML5 UI哪个好用呢
回复 @
{{emojiItem.symbol}}
返回顶部
顶部