SpiderAdmin 正在参加 2020 年度 OSC 中国开源项目评选,请投票支持!
SpiderAdmin 在 2020 年度 OSC 中国开源项目评选 中已获得 {{ projectVoteCount }} 票,请投票支持!
投票让它出道
已投票
授权协议: GPL
开发语言: Python JavaScript HTML/CSS
操作系统: 跨平台
收录时间: 2020-05-11
提 交 者: mouday

SpiderAdmin,一个集爬虫 Scrapy+Scrapyd 爬虫项目查看 和 爬虫任务定时调度的可视化管理工具。

功能介绍

1. 对 Scrapyd 接口进行可视化封装,对 Scrapy 爬虫项目进行删除 和 查看

2. 并没有实现修改,添加功能,部署推荐使用

$ scrapyd-deploy -a

3. 对爬虫设置定时任务,支持 apscheduler 的 3 种方式和随机延时,共计 4 种方式

  • 单次运行 date
  • 周期运行 corn
  • 间隔运行 interval
  • 随机运行 random

4. 基于 Flask-BasicAuth 做了简单的权限校验

启动运行

$ pip3 install -U spideradmin

$ spideradmin init  # 初始化,可选配置,也可以使用默认配置

$ spideradmin       # 启动服务

访问: http://127.0.0.1:5000/

界面截图

展开阅读全文

代码

的 Gitee 指数为
超过 的项目

SpiderAdmin 的相关资讯

还没有任何资讯

SpiderAdmin 的相关博客

还没有任何博客,写博客

SpiderAdmin 的相关问答

还没有任何问答,马上提问

评论 (1)

加载中
good
05/17 16:17
回复
举报
更多评论
1 评论
43 收藏
分享
返回顶部
顶部