分布式实时计算系统 Apache Storm

Apache
Java Groovy Lisp
跨平台
Apache
2014-10-01
红薯

Apache Storm 的前身是 Twitter Storm 平台,目前已经归于 Apache 基金会管辖。

Apache Storm 是一个免费开源的分布式实时计算系统。简化了流数据的可靠处理,像 Hadoop 一样实现实时批处理。Storm 很简单,可用于任意编程语言。Apache Storm 采用 Clojure 开发。

Storm 有很多应用场景,包括实时数据分析、联机学习、持续计算、分布式 RPC、ETL 等。Storm 速度非常快,一个测试在单节点上实现每秒一百万的组处理。

目前已经有包括阿里百度在内的数家大型互联网公司在使用该平台。

加载中

评论(3)

darkmi
darkmi
昨天才收录的? Apache Storm
k
k8king
不是closure语言开发的吗? Apache Storm
yfwz100
yfwz100
不是早就成为Apache管理的项目了吗?现在是顶级项目了? Apache Storm

Apache Storm 1.1.3 和 1.2.2 发布,分布式实时计算

Apache Storm 1.1.3 和 1.2.2 已发布,这是一个常规维护版本,其中包含许多重要的错误修复,可以提高 Storm 的性能,稳定性和容错能力。建议以前版本的用户升级到最新版本。 更新内容较多,详...

2018/06/06 07:34

Apache Storm 1.2.0,1.1.2 和 1.0.6 发布

Apache Storm 1.2.0,1.1.2 和 1.0.6 发布了。主要更新内容及下载地址如下: 1.2.0 New Feature [STORM-2383] - [storm-hbase] Support HBase as state backend [STORM-2484] - Flux: suppo...

2018/02/18 08:32

Apache Storm 1.0.5 发布,分布式实时计算

Apache Storm 1.0.4 已发布,Apache Storm 是一个免费开源的分布式实时计算系统。简化了流数据的可靠处理,像 Hadoop 一样实现实时批处理。Storm 很简单,可用于任意编程语言。Apache Storm ...

2017/09/16 06:51

Apache Storm 1.0.4 发布,分布式实时计算

Apache Storm 1.0.4 已发布,Apache Storm 是一个免费开源的分布式实时计算系统。简化了流数据的可靠处理,像 Hadoop 一样实现实时批处理。Storm 很简单,可用于任意编程语言。Apache Storm ...

2017/07/29 07:31

Apache Storm 1.0.3 发布,分布式实时计算

Apache Storm 1.0.3 发布了,Apache Storm 是一个免费开源的分布式实时计算系统。简化了流数据的可靠处理,像 Hadoop 一样实现实时批处理。Storm 很简单,可用于任意编程语言。Apache Storm ...

2017/02/05 05:22

Apache Storm 0.10.2 发布,分布式实时计算

Apache Storm 0.10.2 发布了,Apache Storm 的前身是 Twitter Storm 平台,目前已经归于 Apache 基金会管辖。 Apache Storm 是一个免费开源的分布式实时计算系统。简化了流数据的可靠处理,像...

2016/09/15 07:32

Apache Storm 0.9.7 发布,分布式实时计算

Apache Storm 0.9.7 发布了,Apache Storm 的前身是 Twitter Storm 平台,目前已经归于 Apache 基金会管辖。 Apache Storm 是一个免费开源的分布式实时计算系统。简化了流数据的可靠处理,像...

2016/09/08 07:32

Apache Storm 1.0.1 发布,分布式实时计算

Apache Storm 1.0.1 发布了,这是一个维护版本,主要修复了一些重要的Bugs,提升性能、稳定性、以及容错能力。内部通信机制消息吞吐量是之前的一倍多,这使得任务间通信效率大大提升。 完整改...

2016/05/07 06:58

Apache Storm 1.0.0 发布,分布式实时计算

Apache Storm 1.0.0 发布了,Apache Storm 的前身是 Twitter Storm 平台,目前已经归于 Apache 基金会管辖。 Apache Storm 是一个免费开源的分布式实时计算系统。简化了流数据的可靠处理,像...

2016/04/13 08:10

没有更多内容

加载失败,请刷新页面

1
回答
storm的nimbus和supervisor线程自动crash

安装的是storm-0.8.1版本 启动之后,查看nimbus和supervisor的日志是正常的。 2015-11-26 01:58:05 Client...

2015/11/26 17:06
1
回答
Storm集群的监控,哪位大神有做过,求指点该怎么做?

Storm自身的UI只能反映storm在运行时的各个参数,但是不能实时去告警。 需要做一个监控storm运行情况的告警系统,若storm自身的nimbus...

2016/11/03 10:23
1
回答
storm中task到底是什么?

storm中task到底是什么?它和组件(spout或bolt)的关系是什么?和tuple又是什么关系呢?

2016/09/21 16:03
1
回答
启动 apache storm 时提示“系统找不到文件 -Xmx1024m。”
沧海_Sea 的回答 2016/03/12 00:22
最佳答案
请不要在Windows下使用Hadoop生态圈的东西 不确定性太大
1
回答
hadoop2.6 和storm 对比 ,哪个更好用

hadoop2.6 和storm 对比 ,哪个更好用

2015/08/03 14:31
1
回答
怎么没有分布式的日志分析系统的介绍呢???

由于刚开始研究这块分布式日志系统的研究,还不是很熟悉,网上查了很多资料,了解一点知识,可是有没有讲解比较完全的一整套的分布式日志系统的介绍呢?就是flum...

2014/12/08 09:50

没有更多内容

加载失败,请刷新页面

没有更多内容

Apache Slider + Storm

#Apache Slider + Storm ##系统环境 安装如下组件,部署可用环境 JDK 1.7.0_79 Apache Zookeeper 3.4.* Apache Zookeeper Apache Hadoop 2.6.* Apache Hadoop Apache Storm 0.9.4 Apache Sto...

2016/09/21 16:54
382
0
storm(2)-基于k8s的安装

上一篇是写的storm基于物理机的安装 首先我们先来编写一下Dockerfile FROM ip:80/bigdata/centos7-jdk:1.8 #config storm env ENV STORM_USER=storm \ STORM_INSTALL_BASE=/home/frank/platf...

2018/07/29 00:19
93
0
storm本地环境

Storm 本地环境 Storm是分布式,提交的topology会分布到多个物理机运行。Storm同时提供本地集群机制,允许storm提交到本地集群,而且所有的bolt、spout都运行在一个进程内,方便对topology调...

2018/09/13 22:24
2
0
storm中文文档

Storm 基础 概念 Scheduler(调度器) Configuration Guaranteeing Message Processing 守护进程容错 命令行客户端 Storm UI REST API 理解 Storm Topology 的 Parallelism(并行度) FAQ La...

2018/12/18 16:06
3
0
windows 安装 storm 及 eclipse 调试 TopN 实例

一:安装JDK 下载地址:地址一 地址二 配置Java环境变量 JAVA_HOME、Path、CLASSPATH三个值分别为(按照自己安装状况设置,此处供参考): D:\java\jdk1.8 %JAVA_HOME%/bin;%JAVA_HOME%/jre...

2012/06/08 22:03
277
0
storm中文文档

Storm 基础 概念 Scheduler(调度器) Configuration Guaranteeing Message Processing 守护进程容错 命令行客户端 Storm UI REST API 理解 Storm Topology 的 Parallelism(并行度) FAQ La...

01/10 10:41
1
0
聊聊storm的reportError

序 本文主要研究一下storm的reportError IErrorReporter storm-2.0.0/storm-client/src/jvm/org/apache/storm/task/IErrorReporter.java public interface IErrorReporter { void reportErro...

2018/10/23 16:12
13
0

没有更多内容

加载失败,请刷新页面

返回顶部
顶部