Apache NiFi 正在参加 2021 年度 OSC 中国开源项目评选,请投票支持!
Apache NiFi 在 2021 年度 OSC 中国开源项目评选 中已获得 {{ projectVoteCount }} 票,请投票支持!
2021 年度 OSC 中国开源项目评选 正在火热进行中,快来投票支持你喜欢的开源项目!
2021 年度 OSC 中国开源项目评选 >>> 中场回顾
Apache NiFi 获得 2021 年度 OSC 中国开源项目评选「最佳人气项目」 !
授权协议 Apache
开发语言 Java 查看源码 »
操作系统 跨平台
软件类型 开源软件
所属分类 企业应用BI商业智能
开源组织 Apache
地区 不详
投 递 者 红薯
适用人群 未知
收录时间 2015-03-18

软件简介

Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统。Apache NiFi 是为数据流设计。它支持高度可配置的指示图的数据路由、转换和系统中介逻辑。

架构:

NiFi Architecture Diagram

集群管理器:

NiFi Cluster Architecture Diagram

主界面:

Empty Flow

关键特性包括:

  • 基于web的用户界面

    • 无缝体验设计、控制和监视

  • 高度可配置的

    • 数据丢失容错和保证交付

    • 低延迟和高吞吐量

    • 动态优先级

    • 流可以在运行时修改

    • 背压 Back presure

  • 数据来源

    • 从始至终跟踪数据流

  • 为扩展设计

    • 构建自己数据处理器

    • 支持快速开发和有效的测试

  • 安全

    • SSL,SSH,HTTPS加密内容,等等……

    • 可插拔的基于角色的验证/授权

展开阅读全文

代码

的 Gitee 指数为
超过 的项目

评论

点击加入讨论🔥(9) 发布并加入讨论🔥
发表了资讯
2021/12/16 07:28

Apache NiFi 1.5.1 紧急发布,修复 log4j2 相关问题

Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统。它为数据流设计,支持高度可配置的指示图的数据路由、转换和系统中介逻辑。Apache NiFi 1.15.1 现已紧急发布,以错误、改进和安全为重点。 确保确保 Apache NiFi 及其相关组件不包含“log4shell”相关库 不再使用 2.16 之前的任何 log4j 1.x 或 2.x 老产品(artifacts) 更新到最新的 logback NiFi NAR Maven 插件更新到 1.3.3 版本,在构建 NAR 期间改进扩...

0
3
发表了资讯
2020/08/21 07:23

Apache NiFi 1.12.0 发布,数据处理与分发系统

Apache NiFi 1.12.0 已经发布,这是一个稳定、安全与特性版本。Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统。它为数据流设计,支持高度可配置的指示图的数据路由、转换和系统中介逻辑。 此版本更新亮点包括: 用于编写脚本化记录转换的新处理器实时存在于流程中 暴露 REST 端点,以方便 Prometheus 进行 metric 衡量 能够指定组级别的流文件的并发,例如端到端运行单个流文件以进行传统作业处理 改进了与...

0
7
发表了资讯
2020/07/22 07:59

Apache NiFi Registry 0.7.0 发布

Apache NiFi Registry 0.7.0 发布了。Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统,它为数据流设计,支持数据路由、转换和系统中介逻辑的高度可配置有向图。Apache NiFi Registry 是 Apache NiFi 的一个子项目,提供了用于存储和管理 NiFi 或 MiNiFi 的一个或多个实例中的共享资源。 0.7.0 是一个特性和稳定性更新,亮点包括: 更新了数据模型,以支持从 NiFi 保存进程组并发配置。 使用 GitFlowPersist...

0
3
发表了资讯
2020/04/09 07:48

Apache NiFi Registry 0.6.0 发布

Apache NiFi Registry 0.6.0 发布了。 Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统,它为数据流设计,支持数据路由、转换和系统中介逻辑的高度可配置有向图。Apache NiFi Registry 是 Apache NiFi 的一个子项目,提供了用于存储和管理 NiFi 或 MiNiFi 的一个或多个实例中的共享资源。 0.6.0 是一个特性和稳定版本,亮点包括: 添加了 ShellUserGroupProvider 以从操作系统加载用户/组 兼容 Java 11 安全...

0
2
发表了资讯
2019/04/12 07:06

Apache NiFi 1.9.2 发布,数据处理和分发系统

Apache NiFi 1.9.2 已发布,Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统。它为数据流设计,支持高度可配置的指示图的数据路由、转换和系统中介逻辑。 该版本有以下更新亮点: 解决了一个内容仓库的 Bug。此 Bug 可能导致底层文件系统上的资源耗尽,将流(flow)停止。 框架代码执行时发生内存不足错误的时候,不再会丢失线程或无反应。 改进使用 PutS3Object 写入 AWS 时国际字符的处理。 改进用户和组被...

0
15
发表了资讯
2018/10/29 07:18

Apache NiFi 1.8.0 发布,数据处理和分发系统

Apache NiFi 1.8.0 已发布,Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统。它为数据流设计,支持高度可配置的指示图的数据路由、转换和系统中介逻辑。 该版本有以下值得关注的更新: 节点之间的安全集群通信现在需要双向 SSL Connections 支持跨群集的负载平衡 可以卸载节点 使用 docker-compose 和环境变量更容易在 Docker 上创建集群 新的或改进的处理器和控制器服务 ...... 下载地址: https://nifi.a...

2
16
发表了资讯
2018/07/19 07:09

Apache NiFi 1.7.1 发布,数据处理和分发系统

Apache NiFi 1.7.1 已发布,Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统。它为数据流设计,支持高度可配置的指示图的数据路由、转换和系统中介逻辑。 该版本有以下值得关注的更新: Fixed an issue with wildcard certificates used to secure a cluster. Wildcard certificates are officially not supported but this regression behavior was fixed. Fixed an issue where an infinite loop could b...

1
6
发表了资讯
2018/01/24 10:57

Apache NiFi MiNiFi 0.4.0 发布,改善错误报告

Apache NiFi MiNiFi 0.4.0 已发布,新版本支持与 NiFi 1.5.0 进行通信,更新了配置工具包以帮助用户将 NiFi 模板转换为 MiNiFi 配置,并对错误报告进行了改善。 更多详情可查阅发行说明。 Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统,支持高度可配置的指示图的数据路由、转换和系统中介逻辑。MiNiFi 是 Apache NiFi 的子项目,提供了一种互补的数据收集方法,补充了 NiFi 在数据流管理方面的核心原则,...

0
0
发表了资讯
2018/01/14 07:53

Apache NiFi 1.5.0 发布,数据处理和分发系统

Apache NiFi 1.5.0 已发布,Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统。它为数据流设计,支持高度可配置的指示图的数据路由、转换和系统中介逻辑。 该版本有以下值得关注的更新: 引入新的或改进过的 Processors, Controller Services 以及 Reporting Tasks 新增了与 Kafka 1.0 交互的处理器 NiFi lineage 现可导出到 Apache Atlas 升级 HDFS, HBase, Hive processors 以更好地处理 Kerberos ticket ...

1
11
发表了资讯
2018/01/04 07:30

Apache NiFi Registry 0.1.0 发布

Apache NiFi Registry 0.1.0 发布,Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统。Apache NiFi Registry,Apache NiFi 的一个子项目,提供了一个互补的共享应用程序进行存储和管理跨一个或多个 NiFi 和/或MiNiFi 实例的资源。 0.1.0 版本是关于存储的最初版本版本化流程的管理,以及基本 API 和初始安全配置。 目标: 实施流程注册表以存储和管理版本化流程 与 NiFi 集成允许从 Flow Registry 存储,检索...

1
4
发表了资讯
2017/12/02 07:10

Apache NiFi MiNiFi C++ 0.3.0 发布

Apache NiFi MiNiFi C++ 0.3.0 已发布,Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统。MiNiFi 是 Apache NiFi 的子项目,提供了一种互补的数据收集方法,补充了 NiFi 在数据流管理方面的核心原则,重点是从数据收集源头收集数据。 该版本提供了几个新的处理器和特性,亮点包括: Creation of ExecuteScript processor using Python and Lua as underlying scripting engines Creation of a Lib Archive m...

0
3
发表了资讯
2017/06/10 07:21

Apache NiFi 1.3.0 发布,数据处理和分发系统

Apache NiFi 1.3.0 发布了,Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统。它为数据流设计,支持高度可配置的指示图的数据路由、转换和系统中介逻辑。 新版本更新亮点包括: 在计算组件统计信息时寻找时区错误 增加了弃用组件的能力 使用压缩的 RPG 解决可能的 OutOfMemory 异常 解决了可能导致 FileSystemRepository 中的 NPE 交换问题 解决了 RPG 在无法联系目标实例时不能保证产量持续时间的问题 ……...

0
14
发表了资讯
2017/05/20 07:25

Apache NiFi 0.7.3 发布,数据处理和分发系统

Apache NiFi 0.7.3 发布了,Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统。它为数据流设计,支持高度可配置的指示图的数据路由、转换和系统中介逻辑。 该版本亮点包括: 可靠性 解决了可能导致存储库损坏的两个问题 解决了可能导致不从内容存储库中删除文件的问题 性能 改进组件验证,以在图形上有许多组件时提高 UI 响应能力 改进文档扩展,可以减少NiFi启动时间 修复 修复 ControlRate, FetchSFTP, Ge...

0
8
发表了资讯
2017/05/13 07:02

Apache NiFi MiNiFi C++ 0.2.0 发布

Apache NiFi MiNiFi C++ 0.2.0 发布了,Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统。Apache NiFi 为数据流设计。它支持高度可配置的指示图的数据路由、转换和系统中介逻辑。 值得关注的更新: 结合 Catch 测试框架和 Google linting 以保证代码质量和增强测试覆盖率 提供对报告任务的支持以及站点到站点发现报告的初始实施 新的 Processors 包括 PutFile 和 LIstenHTTP 代码库的模块化和命名空间 完整的...

2
10
发表了资讯
2017/02/26 07:34

Apache NiFi 1.1.2 和 0.7.2 发布,数据处理和分发系统

Apache NiFi 1.1.2 和 0.7.2 发布了,Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统。它为数据流设计,支持高度可配置的指示图的数据路由、转换和系统中介逻辑。 Apache NiFi 1.1.2 版本完整更新内容请查看此处,主要更新包括: Minor user 身份格式化重构以修复 NullPointerException。 unit tests 的 Regenerating 测试证书。 Apache NiFi 0.7.2 版本完整更新内容请查看此处,主要更新包括: Minor user...

0
22
没有更多内容
加载失败,请刷新页面
点击加载更多
加载中
下一页
发表了博客
{{o.pubDate | formatDate}}

{{formatAllHtml(o.title)}}

{{parseInt(o.replyCount) | bigNumberTransform}}
{{parseInt(o.viewCount) | bigNumberTransform}}
没有更多内容
暂无内容
发表了问答
{{o.pubDate | formatDate}}

{{formatAllHtml(o.title)}}

{{parseInt(o.replyCount) | bigNumberTransform}}
{{parseInt(o.viewCount) | bigNumberTransform}}
没有更多内容
暂无内容
暂无内容
9 评论
460 收藏
分享
OSCHINA
登录后可查看更多优质内容
返回顶部
顶部