Luigi 正在参加 2020 年度 OSC 中国开源项目评选,请投票支持!
Luigi 在 2020 年度 OSC 中国开源项目评选 中已获得 {{ projectVoteCount }} 票,请投票支持!
投票让它出道
已投票
授权协议: Apache
开发语言: Python
操作系统: 跨平台
收录时间: 2014-10-15
提 交 者: 红薯

Luigi 是一个 Python 模块,可以帮你构建复杂的批量作业管道。处理依赖决议、工作流管理、可视化展示等等,内建 Hadoop 支持。

Dependency graph

展开阅读全文

代码

Luigi 的相关博客

开源数据流管道-Luigi vs Azkaban vs Oozie vs Airflow

原文链接:https://www.jianshu.com/p/4ae1faea733b 随着企业的发展,他们的工作流程变得更加复杂,越来越多的有着错综复杂依...

《构建 QuantLib》正式出版

《构建 QuantLib》在 leanpub.com 出版了! leanpub.com 上的购买链接:《构建 QuantLib》 Luigi 发来贺电:Implementing Qu...

《Implementing QuantLib》译后记

[TOC] 就在几天之前,经历了一年时间断断续续的坚持,《Implementing QuantLib》的初步翻译工作告一段落。撰写此文作为总结和...

New generation Job schedulers

https://github.com/spotify/luigi https://github.com/apache/incubator-airflow https://github.com/pinterest/pinball htt...

如何在Python中获得类似于Cron的调度程序? [关闭]

关闭。 这个问题是 题外话 。 它当前不接受答案。 想改善这个问题吗? 更新问题 ,使其成为Stack Overflow 的主题 。 3个月前...

Dask教程

Dask 介绍 Dask是一款用于分析计算的灵活并行计算库。 Dask由两部分组成: 针对计算优化的动态任务调度。这与Airflow,Luigi...

2020 非常火的 11 个微前端框架

点击“开发者技术前线”,选择“星标🔝” 让一部分开发者看到未来 作者 | Jonathan Saring 译者 | Flora https://itnext.i...

17. CTF综合靶机渗透(十)

靶机描述: 欢迎来到超级马里奥主机! 这个虚拟机是对真实世界场景场景的模拟。 目标是在VM中找到2个标志。根是不够的(对不起...

xxl-job总体还可以,轻量级,应能满足需求,有几个关键的能力

xxl-job总体还可以,轻量级,应能满足需求,有几个关键的能力 1、内部多线程,多任务可在单个执行器上并发执行 2、支持简单的...

后台开发 - DPDK引发的图谱

关系图谱(点击看完整大图): 部分名词: 名词 全写 解释 备注 DPDK Data Plane Development Kit 数据平面开发套件或叫数据平...

Luigi 的相关问答

还没有任何问答,马上提问

评论 (0)

加载中
更多评论
0 评论
68 收藏
分享
返回顶部
顶部