数据处理和分发系统 Apache NiFi

数据处理和分发系统 Apache NiFi

Apache
Java
跨平台
Apache
2015-03-18
红薯

Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统。Apache NiFi 是为数据流设计。它支持高度可配置的指示图的数据路由、转换和系统中介逻辑。

架构:

NiFi Architecture Diagram

集群管理器:

NiFi Cluster Architecture Diagram

主界面:

Empty Flow

关键特性包括:

  • 基于web的用户界面

    • 无缝体验设计、控制和监视

  • 高度可配置的

    • 数据丢失容错和保证交付

    • 低延迟和高吞吐量

    • 动态优先级

    • 流可以在运行时修改

    • 背压 Back presure

  • 数据来源

    • 从始至终跟踪数据流

  • 为扩展设计

    • 构建自己数据处理器

    • 支持快速开发和有效的测试

  • 安全

    • SSL,SSH,HTTPS加密内容,等等……

    • 可插拔的基于角色的验证/授权

加载中

评论(9)

shmilu
shmilu
国外的文档就是不好 全是英文MD
rom1c丶
rom1c丶
mark一下 不懂
chunkchen
chunkchen
先关注,回头学一下 #Apache NiFi#
beyondforever68
beyondforever68
看起来好厉害,没搞明白怎么用 #Apache NiFi#
xmut
xmut
这东西很像Kettle #Apache NiFi#
QXU
QXU
有人在用这个么?我最近在用,希望有人一起交流 #Apache NiFi#
zmyer
zmyer
下载链接进不来。啥情况 #Apache NiFi#
parselife
parselife
好什么呀 主页上面的链接一个也不能点 是做来 看看的么。。 Apache NiFi
orangleliu
orangleliu

Apache NiFi 1.9.2 发布,数据处理和分发系统

Apache NiFi 1.9.2 已发布,Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统。它为数据流设计,支持高度可配置的指示图的数据路由、转换和系统中介逻辑。 该版本有以下更...

04/12 07:06

Apache NiFi 1.8.0 发布,数据处理和分发系统

Apache NiFi 1.8.0 已发布,Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统。它为数据流设计,支持高度可配置的指示图的数据路由、转换和系统中介逻辑。 该版本有以下值...

2018/10/29 07:18

Apache NiFi 1.7.1 发布,数据处理和分发系统

Apache NiFi 1.7.1 已发布,Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统。它为数据流设计,支持高度可配置的指示图的数据路由、转换和系统中介逻辑。 该版本有以下值...

2018/07/19 07:09

Apache NiFi MiNiFi 0.4.0 发布,改善错误报告

Apache NiFi MiNiFi 0.4.0 已发布,新版本支持与 NiFi 1.5.0 进行通信,更新了配置工具包以帮助用户将 NiFi 模板转换为 MiNiFi 配置,并对错误报告进行了改善。 更多详情可查阅发行说明。 Ap...

2018/01/24 10:57

Apache NiFi 1.5.0 发布,数据处理和分发系统

Apache NiFi 1.5.0 已发布,Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统。它为数据流设计,支持高度可配置的指示图的数据路由、转换和系统中介逻辑。 该版本有以下值...

2018/01/14 07:53

Apache NiFi Registry 0.1.0 发布

Apache NiFi Registry 0.1.0 发布,Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统。Apache NiFi Registry,Apache NiFi 的一个子项目,提供了一个互补的共享应用程序进...

2018/01/04 07:30

Apache NiFi MiNiFi C++ 0.3.0 发布

Apache NiFi MiNiFi C++ 0.3.0 已发布,Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统。MiNiFi 是 Apache NiFi 的子项目,提供了一种互补的数据收集方法,补充了 NiFi...

2017/12/02 07:20

Apache NiFi 1.3.0 发布,数据处理和分发系统

Apache NiFi 1.3.0 发布了,Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统。它为数据流设计,支持高度可配置的指示图的数据路由、转换和系统中介逻辑。 新版本更新亮点...

2017/06/10 07:17

Apache NiFi 0.7.3 发布,数据处理和分发系统

Apache NiFi 0.7.3 发布了,Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统。它为数据流设计,支持高度可配置的指示图的数据路由、转换和系统中介逻辑。 该版本亮点包括...

2017/05/20 07:22

Apache NiFi MiNiFi C++ 0.2.0 发布

Apache NiFi MiNiFi C++ 0.2.0 发布了,Apache NiFi 是一个易于使用、功能强大而且可靠的数据处理和分发系统。Apache NiFi 为数据流设计。它支持高度可配置的指示图的数据路由、转换和系统中...

2017/05/13 07:00

没有更多内容

加载失败,请刷新页面

暂无问答

NiFi-面向流程的大数据处理框架

任何一个大数据分析的软件,都需要一个强大的数据拉取组件、数据仓储系统、数据处理引擎、任务调度引擎和流程设计界面。Hadoop和Spark的重点是在数据的存储和任务调度,R的重点是数据分析引擎...

2015/08/12 13:28
4.6K
2
NIFI PutHiveStreaming 开启HDFS HA后无法写入问题

开启HDFS HA后,NIFI puthiveStreaming无法写入问题,报错 org.apache.nifi.processors.hive.PutHiveStreaming$ShouldRetryException: Hive Streaming connect/write error, flow file will ...

2018/02/02 13:41
73
0
ElasticSearch 全文检索实战

本文针对一个通用的应用场景,讲解如何利用 ElasticSearch 快速实现对关系型数据库文本和常见文档格式附件的全文检索。

2018/06/07 11:21
930
1
Mysql数据同步Elasticsearch方案总结

前言 要通过elasticsearch实现数据检索,首先要将数据导入elasticsearch,并实现数据源与elasticsearch数据同步.这里使用的数据源是Mysql数据库.目前mysql与elasticsearch常用的同步机制大多是...

2018/10/25 20:29
1K
0
Nifi 的简单使用

Nifi 的使用 Nifi 是一个开源的数据处理工具,可以通过简单的Processor对数据流进行处理。1.8版本内置了286个Processor,可以处理大部分的应用场景。 Nifi 的一些核心概念: FlowFile:信息流...

2018/12/03 15:16
1K
1
除了Hadoop,还有6个你必须知道的大数据技术

你知道新的市场领导者和曾经的领导者之间的关键区别是什么吗? 那就是“数据管理”。任何无法处理数据并将其投入使用的企业,很可能会让位给那些能够更好处理数据的。 事实上,大数据和其流动...

02/23 16:46
0
0
技术探索20160808 - Hadoop相关技术栈

##Apex 新一代的数据流分析平台,号称要战胜spark stream和storm的框架。谈到关键的改变,网友说: >it comes with built-in support for fault-tolerance, scalability and focus on operab...

2016/08/18 17:59
55
0
程序员需要详细了解的十个大数据技术

大数据已然成为当今最热门的技术之一,正呈爆炸式增长。每天来自全球的新项目如雨后春笋般涌现。幸运地是,开源让越来越多的项目可以直接采用大数据技术,下面就来盘点最受欢迎的十大开源的大...

03/05 19:32
14
0
除Hadoop外你还需要知道的9个大数据技术

Hadoop是大数据领域最流行的技术,但并非唯一。还有很多其他技术可用于解决大数据问题。除了Apache Hadoop外,另外9个大数据技术也是必须要了解的。 Apache Flink Apache Samza Google Cloud...

2016/06/01 17:07
64
0

没有更多内容

加载失败,请刷新页面

返回顶部
顶部