spider-flow 0.4.0 发布,Java 开源爬虫平台

2020年03月16日

spider-flow 是一个无需写代码的爬虫平台,通过定义流程的方式制定爬虫

更新日志

  • 新增自定义函数功能
  • 新增输出节点支持输出至数据库或csv文件
  • 新增获取元素节点和上级元素方法elementVar.subling()、elementVar.parent()、elementVar.parents()、elementsVar.parents()
  • 修复日志文件内容为空的问题 #I1AXQK
  • 修复输出时可能出现的ArrayIndexOutOfBoundsException异常
  • 优化界面显示,并将右侧属性配置移到底部
  • 优化file函数,将下载调整为file.download(path,url)和file.download(path,urls)
  • 优化程序逻辑,将递归执行改为非递归执行
展开阅读全文
12 收藏
分享
加载中
更多评论
0 评论
12 收藏
分享
返回顶部
顶部