Apache Kafka 正在参加 2020 年度 OSC 中国开源项目评选,请投票支持!
Apache Kafka 在 2020 年度 OSC 中国开源项目评选 中已获得 {{ projectVoteCount }} 票,请投票支持!
投票让它出道
已投票
授权协议: Apache
开发语言: Scala 查看源码 »
操作系统: 跨平台
开发厂商: Apache
收录时间: 2011-05-07
提 交 者: 老盖

kafka是一种高吞吐量的分布式发布订阅消息系统,她有如下特性:

  • 通过O(1)的磁盘数据结构提供消息的持久化,这种结构对于即使数以TB的消息存储也能够保持长时间的稳定性能。

  • 高吞吐量:即使是非常普通的硬件kafka也可以支持每秒数十万的消息。

  • 支持通过kafka服务器和消费机集群来分区消息。

  • 支持Hadoop并行数据加载。

卡夫卡的目的是提供一个发布订阅解决方案,它可以处理消费者规模的网站中的所有动作流数据。 这种动作(网页浏览,搜索和其他用户的行动)是在现代网络上的许多社会功能的一个关键因素。 这些数据通常是由于吞吐量的要求而通过处理日志和日志聚合来解决。 对于像Hadoop的一样的日志数据和离线分析系统,但又要求实时处理的限制,这是一个可行的解决方案。kafka的目的是通过Hadoop的并行加载机制来统一线上和离线的消息处理,也是为了通过集群机来提供实时的消费。

Git 地址:

http://git-wip-us.apache.org/repos/asf/kafka.git
展开阅读全文

代码

的 Gitee 指数为
超过 的项目

Apache Kafka 的相关博客

Kafka-为什么选择kafka(kafka的优点)

Kafka-为什么选择kafka(kafka的优点) 多个生产者 kafka可以无缝的支持多个生产者,不管客户端在使用单个主题还是多个主题。所...

【kafka】安装部署kafka集群(kafka版本:kafka_2.12-2.3.0)

3.2.1 下载kafka并安装 kafka_2.12-2.3.0.tgz tar -zxvf kafka_2.12-2.3.0.tgz 3.2.2 配置kafka集群 在config/server.propert...

kafka学习 -- kafka connect

写在前面 这里 介绍几种kafka connect 的方式,包括以下 kafka-connect-hdfs kafka-connect-elasticsearch kafka-connect-jdb...

kafka学习 -- kafka connect

写在前面 这里 介绍几种kafka connect 的方式,包括以下 kafka-connect-hdfs kafka-connect-elasticsearch kafka-connect-jdb...

【kafka】kafka集群搭建

简介 要配置kafka,首先要配置zookeeper保证集群的高可用。因此本教程包含两者的配置。 1、下载kafka:https://www.apache.or...

Kafka监控:Kafka-Manager

Kafka Manager是雅虎开发的kafka监控及管理工具,项目地址:https://github.com/yahoo/kafka-manager 安装 下载源码: git cl...

Kafka安装kafka-manager

1 .下载kafka-manager 想要查看和管理Kafka,完全使用命令并不方便,我们可以使用雅虎开源的Kafka-manager,GitHub地址如下:...

kafka学习 -- kafka connect

写在前面 这里 介绍几种kafka connect 的方式,包括以下 kafka-connect-hdfs kafka-connect-elasticsearch kafka-connect-jdb...

Kafka集群安装部署、Kafka生产者、Kafka消费者

Storm上游数据源之Kakfa 目标: 理解Storm消费的数据来源、理解JMS规范、理解Kafka核心组件、掌握Kakfa生产者API、掌握Kafka...

评论 (6)

加载中
#Kafka# #RabbitMQ# 都试了试 明天试试#NSQ#
2018/11/28 01:25
回复
举报
有没有用c++开发kafka的,加个好友以后好交流
2018/07/18 15:14
回复
举报
请问下如何使用#Kafka#实现定时任务?
2018/07/02 09:30
回复
举报
打分: 推荐
哪位推荐一款好用的kafka监控工具
2017/12/12 15:54
回复
举报
https://docs.confluent.io/current/quickstart.html 快速入门里面没有说明Linux下用什么用户执行命令,难道都是用root?
2017/11/10 11:22
回复
举报
打分: 力荐
真的不错~
2017/11/03 08:27
回复
举报
Apollo Kafka
2015/03/12 08:52
回复
举报
2016/03/26 14:05
回复
举报
更多评论
6 评论
783 收藏
分享
返回顶部
顶部