Scrapy 1.5.0 发布,Web 爬虫框架 - 开源中国社区
Float_left Icon_close
Scrapy 1.5.0 发布,Web 爬虫框架
周其 2017年12月30日

Scrapy 1.5.0 发布,Web 爬虫框架

周其 周其 发布于2017年12月30日 收藏 19

做APP,小程序就上开源众包。世界杯期间免费领2600元启动金。>>>  

Scrapy 1.5.0 发布了,Scrapy 是一套基于 Twisted 的异步处理框架,纯 Python 实现的爬虫框架,用户只需要定制开发几个模块就可以轻松的实现一个爬虫,用来抓取网页内容以及各种图片。

更新内容:

  • 在调用Feed导出存储之前,URI会被重新设置

  • 避免在项目加载器中缺少基本项目字段

  • 添加测试报告给Travis

  • 修复#3034,CSV在Windows上导出不必要的空行问题

完整更新内容请查看发行说明

下载地址:

本站文章除注明转载外,均为本站原创或编译。欢迎任何形式的转载,但请务必注明出处,尊重他人劳动共创开源社区。
转载请注明:文章转载自 开源中国社区 [http://www.oschina.net]
本文标题:Scrapy 1.5.0 发布,Web 爬虫框架
分享
评论(2)
最新评论
0
下次继续运行的时候,已经爬取的不想一再爬,应该怎么实现?
0
不知不觉已经到了1.5了,加油scrapy
顶部