PiFlow v0.8 发布,大数据流水线系统

2020年09月30日

PiFlow是一个基于分布式计算框架Spark开发的大数据流水线系统。该系统将数据的采集、清洗、计算、存储等各个环节封装成组件,以所见即所得方式进行流水线配置。简单易用,功能强大。本次版本更新如下特性:

  1. PiFlow-web进行了前后端分离,前端采用Vue架构重构,页面进行了整体优化
  2. 增加首页功能,统计资源使用情况和流水线信息
  3. 增加了数据处理组件属性配置样例
  4. 增加流水线/流水线组定时调度功能
  5. 增加自定义组件热插拔功能
  6. 增加了国际化展示

Gitee地址: https://gitee.com/opensci/piflow

GitHub地址: https://github.com/cas-bigdatalab/piflow

1)首页

2)数据处理组件属性配置样例

3)流水线/流水线组定时调度

4)自定义组件热插拔

5)国际化

展开阅读全文
22 收藏
分享
加载中
更多评论
0 评论
22 收藏
分享
返回顶部
顶部