Digdag 正在参加 2021 年度 OSC 中国开源项目评选,请投票支持!
Digdag 在 2021 年度 OSC 中国开源项目评选 中已获得 {{ projectVoteCount }} 票,请投票支持!
2021 年度 OSC 中国开源项目评选 正在火热进行中,快来投票支持你喜欢的开源项目!
2021 年度 OSC 中国开源项目评选 >>> 中场回顾
Digdag 获得 2021 年度 OSC 中国开源项目评选「最佳人气项目」 !
授权协议 Apache-2.0
开发语言 Java Python JavaScript
操作系统 跨平台
软件类型 开源软件
所属分类 程序开发工作流引擎
开源组织
地区 不详
投 递 者 白开水不加糖
适用人群 未知
收录时间 2021-07-05

软件简介

Digdag 是一个简单的工具,帮助你建立、运行、安排和监控复杂的任务管道。它可以处理依赖性问题,使任务串联或并行运行。

Digdag 取代了 cron,促进了 IT 运营自动化,协调了数据工程任务,协调了机器学习管道,等等。

Digdag 旨在实现易于部署、多云设置和模块化的结构来构建和扩展业务应用。拥有一系列企业功能,包括丰富的管理面板、多语言支持、错误处理、配置工具和版本控制工具。该解决方案采用 Java 和 Node.js 开发,支持 AWS、私有云、IBM 云和 Digital Ocean。​​​​

特性:

  • 轻松部署:只需下载二进制文件即可。同一个二进制文件可以同时运行服务器和客户端。
  • 简单配置:Digdag 配置是用 YAML 编写的,YAML 是一种广泛使用的简单标记语言。
  • 依赖解析:读取和写入具有依赖项的工作流。告别“timing”cron 作业以协调多个任务。
  • 多云:跨 Amazon Redshift/S3、Google BigQuery/Cloud Storage 和本地数据库移动和合并数据。
  • 多种语言:对 Python 和 Ruby 的 native支持。
  • 错误处理:Digdag 附带强大的错误处理功能。
  • 模块化的:Digdag 设计为模块化的,因此每个工作流都可以在不同的上下文中重复使用。
  • 可扩展:Digdag 设计为可插拔的,因此您可以破解自己的操作符、控制流等。
  • 管理界面:Digdag 有一个正在开发中的管理 UI。
  • Digdag 提供了一个秘密保险库,以便安全地处理 API 密钥和密码等敏感信息。
  • Docker 支持:Digdag 允许你从 Docker 容器运行任务以支持云原生工作流。
  • 版本控制:Digdag 是工作流即代码。支持 revisions 和 rollbacks。
展开阅读全文

代码

的 Gitee 指数为
超过 的项目

评论 (0)

加载中
更多评论
暂无内容
发表了博客
2019/02/10 22:52

awesome-workflow-engines

转自:https://github.com/meirwah/awesome-workflow-engines awesome-workflow-engines A curated list of awesome open source workflow engines Full fledged product Airflow - Python-based platform for running directed acyclic graphs (DAGs) of tasks Argo - Open source container-native workflow engine for getting work done on Kubernetes Azkaban - Batch workflow job scheduler created at LinkedIn to run ...

0
1
没有更多内容
加载失败,请刷新页面
点击加载更多
加载中
下一页
暂无内容
0 评论
3 收藏
分享
OSCHINA
登录后可查看更多优质内容
返回顶部
顶部