授权协议 GPLv2
开发语言 Java JavaScript HTML/CSS SHELL
操作系统 跨平台
软件类型 开源软件
所属分类 大数据其他
开源组织 eBay
地区 不详
投 递 者 Qiaoling
适用人群 未知
收录时间 2015-03-03

软件简介

Pulsar 是 eBay 开源的实时大数据分析平台。

作为全球性的商务平台和支付行业领先者,拥有海量的用户行为数据。基于现有的hadoop大数据处理,已经不能够满足业务上对实时性的需求。基于过去的大数据处理的经验和对最新技术的运用,探索出一个对海量的数据流进行实时的收集,处理,分发和分析的平台。并于2015年2月底开源此平台: Pulsar。

Pulsar 作为一个复杂事件处理平台,具有快速,准确,灵活的特性,保证点到点的低延时和高可靠,从而很好得满足了的eBay秒级实时数据分析的需求。同时每秒百万级流量处理能力,给客户带来更好的个性化体验,帮助客户监控实时业务信息并定制实时营销策路,及时监测网络欺诈行为并减少机器人干预。并且Pulsar是基于标准的分布式云架构部署并跨越多个数据中心,从而保证了在系统升级和拓扑更新时没有集群停机时间。

Pulsar logo

Pulsar 平台提供了一个完整的实时大数据分析的解决方案:

Pulsar architecture

该平台能够实时收集 Event Stream,并且对 Event 进行实时的 Enrichment 和 Sessionization,推送到不同的实时应用,同时能够实时的进行统计和分析,对业务提供 Key insights.

在 Pulsar 平台内部,它把 Event Stream 看成一种类数据库的表,在上面通过应用申明式的4GL来定义Business logic. 并且同时开源了作为支撑Pulsar 的一个全新的大数据流处理框架: Pulsar Jetstream.

Pulsar.Stream是一个通用的全新的大数据流的处理框架。他实现了一个开放的,自动发现的Topology, 不同的应用可以分布在不同的Data center, 通过网络进行自动的发现并且建立连接,数据主动从Producer推送到Subscriber. 在每个应用内部,通过Pipeline的方式连接各个业务模块,并且支持用4GL的EPL来定义业务逻辑。整个的topology是开放的并且能够动态扩展,相应的EPL也能够进行动态的更新且没有服务中断。

典型的部署结构

EPL

介绍来自 CSDN

展开阅读全文

代码

的 Gitee 指数为
超过 的项目

评论 (0)

加载中
更多评论
暂无内容
2015/12/16 19:06

ebay

资料提交地址:http://developer.ebay.com/support/developersupport/app_check/Default.aspx 如果需要带图片的申请材料,请向我们索取,我们会尽最大努力帮助您通过兼容性认证。这样您每一天就可以有150w次的call次数。 资料内容和回答: Application Title / Summary * Required |应用程序标题/摘要*必填 Mallerp外贸流程处理系统 Mallerp foreign trade workflow processing system Application Details * Required Please d...

0
0
发表了博客
2017/10/24 09:52

eBay客服

客人问:什么时候能收到货[信封类] Have a nice day! We will send out your replacement on Monday , it will take about 2-7 working days for the shipping. We send it out by envelope as the item's size doesn't reach to send via package with tracking So the item doesn't have the tracking info. If you still not received the item after 2-7 working days , you can check about your mail box, or ask your ...

0
0
2020/07/01 10:32

[Pulsar-源码] Pulsar client初始化

文章目录 Pulsar client初始化过程 Producer 初始化 Pulsar client初始化过程 初始化Pulsar Producer和Consumer都需要先初始化Pulsar client。示例: PulsarClient client = PulsarClient.builder() .serviceUrl("pulsar://127.0.0.1:6650") .build(); 1 2 3 PulsarClient.builder() 会创建一个ClientBuilderImpl一个实例, 并用一个 ClientConfigurationData实例来初始化conf对象; .serviceUrl("pulsar://127.0.0.1:6650") 为c...

0
0
发表了博客
2019/12/13 13:46

ebay API属性

Ebay Trading API整理 纠纷相关   AddDispute:创建一个未支付纠纷 或 取消 a single line item order AddDisputeResponse:回复/关闭dispute GetDispute:获取Dispute GetUserDisputes :获取用户作为买家或卖家的Dispute SellerReverseDispute 商品相关   AddItem:添加一个item AddFixedPriceItem AddItemFromSellingManagerTemplate:从Selling Manager templates创建 listing AddItems:上传1到5个item AddToItemDescription...

0
0
发表于服务端专区
2020/05/21 11:31

Pulsar笔记(好)

Pulsar 是由 Yahoo 于 2016 年开源并捐赠给 Apache 基金会的一款消息中间件,其主要特点是多租户且易于扩展,本文根据自己对 Pulsar 相关文档的理解并请教相关 PMC 后写成,囿于水平有限,错误难免,欢迎留言指正。 1 Pulsar vs Kafka 很多人查看 Pulsar 之前可能对 Kafka 很熟悉,参照上图可见二者内部结构的区别,下面详述二者的异同以明了 Pulsar 的特点。 1.1 名词对应表 根据个人对参考文档1的理解,整理如下Pulsar 和 Ka...

0
0
发表于服务端专区
2020/04/21 22:09

pulsar初探

功能 命令 备注 standalone启动 bin/pulsar standalone standalone关闭 bin/pulsar stop standalone 后台启动 bin/pulsar-daemon start standalone 后台关闭 bin/pulsar-daemon stop standalone org.apache.pulsar.admin.cli.PulsarAdminTool#main为admin解析的入口 org.apache.pulsar.broker.admin.v1.PersistentTopics#triggerOffload 手动触发offload(暴露的http接口) offload逻辑 org.apache.bookkeeper.mledger.impl.Manag...

0
0
2020/12/24 19:00

共塑 Pulsar 未来,抽取 Pulsar 周边

关于 Apache Pulsar Apache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具有强一致性、高吞吐、低延时及高可扩展性等流数据存储特性。 GitHub 地址:http://github.com/apache/pulsar/ 一年一度的 Pulsar 调查活动来啦!Pulsar 2020 用户调查活动已启动,写下你的需求与建议,您...

0
0
2020/12/24 19:30

共塑 Pulsar 未来,抽取 Pulsar 周边

关于 Apache Pulsar Apache Pulsar 是 Apache 软件基金会顶级项目,是下一代云原生分布式消息流平台,集消息、存储、轻量化函数式计算为一体,采用计算与存储分离架构设计,支持多租户、持久化存储、多机房跨区域数据复制,具有强一致性、高吞吐、低延时及高可扩展性等流数据存储特性。 GitHub 地址:http://github.com/apache/pulsar/ 一年一度的 Pulsar 调查活动来啦!Pulsar 2020 用户调查活动已启动,写下你的需求与建议,您...

0
0
发表了博客
2012/11/28 14:50

eBay再度问路中国

六年前遭遇淘宝是eBay兵败中国的直接原因,经历了数年的沉默转型之后,eBay借助和走秀网的合作再度叩击中国市场。这壹次,eBay能在中国成功本土化吗? “eBay重返中国零售市场。”11月12日,eBay(纳斯达克交易代码:EBAY)全球副总裁陈筱凤在深圳“eBay Style秀”揭幕式上,用壹口不太流利的中文对台下的观众说。 她宣布,eBay将与走秀网(xiu.com)联合推出网购频道“eBay Style秀”,体现为走秀网的二级域名“ebay.xiu.com”。...

0
0
发表于云计算专区
2020/12/28 18:00

pulsar-1:docker部署pulsar多节点集群

目录: (1).docker部署bpulsar-zookeeper节点 (2).initial pulsar集群 (3).docker部署bookie节点 (4).docker部署broker节点并附带启用pulsar-connectors (5).docker部署pulsar-manager 5.1.部署pulsar-manager 5.2.增加超级管理员用户 5.3.增加普通用户 5.4.使用pulsar-manager创建测试用环境 (6).使用pulsar-data-generator-connector生成测试数据测试集群 (7).pulsar-connector初探 (8).docker部署查询引擎pulsar-presto (9)...

0
0
没有更多内容
加载失败,请刷新页面
点击加载更多
加载中
下一页
暂无内容
0 评论
76 收藏
分享
OSCHINA
登录后可查看更多优质内容
返回顶部
顶部