数据质量管理方案 Bark

GPL
Java
跨平台
2016-08-25
redstorm

模型驱动的数据质量服务平台

Bark是eBay开发的一种应用于分布式数据系统中的开源数据质量解决方案,例如在Hadoop, Spark, Storm等分布式系统中,Bark提供了一整套统一的流程来定义、测量数据集的质量并及时报告问题。可以在这里fork下载源代码。 https://ebay.github.io/DQSolution/

主要特性:

  • 精确度检测:验证结果集数据是否与源数据是一致的

  • 数据剖析:利用数据集的一致性、独特性和逻辑性,来进行统计分析和数值评估。

  • 异常监测:利用预先设定的算法,检测出不符合预期的数据

  • 可视化监测:利用控制面板来展现数据质量的状态。

核心优势:

  • 实时性:可以实时进行数据质量检测,能够及时发现问题。

  • 可扩展性:可以用于多个数据系统。

  • 可伸缩性:工作在大数据量的环境中,目前运行的数据量约1.2PB (eBay环境)

自助服务:Bark提供了一个简单的用户界面,可以创建数据集以及相应规则;同时用户可以查看数据质量控制面板和自定义显示内容

主业务流程:

Business_Process_image

系统架构:

Technical Architecture Design

加载中

评论(0)

暂无评论

暂无资讯

2
回答
软件官网打不开

软件官网打不开

2016/10/26 12:40

没有更多内容

加载失败,请刷新页面

没有更多内容

Java基础学习总结(11)——重载与重写

首先我们来讲讲:重载(Overloading) 一、方法的重载      方法名一样,但参数不一样,这就是重载(overload)。   所谓的参数不一样,主要有两点:第一是参数的个数不一样,第二是参数的...

2016/01/20 14:09
1
1
Java基础学习总结(11)——重载与重写

首先我们来讲讲:重载(Overloading) 一、方法的重载      方法名一样,但参数不一样,这就是重载(overload)。   所谓的参数不一样,主要有两点:第一是参数的个数不一样,第二是参数的...

2015/12/31 13:07
0
0
Java基础学习总结(11)——重载与重写

首先我们来讲讲:重载(Overloading) 一、方法的重载      方法名一样,但参数不一样,这就是重载(overload)。   所谓的参数不一样,主要有两点:第一是参数的个数不一样,第二是参数的...

2015/12/31 13:08
0
0
Java基础学习总结(11)——重载与重写

首先我们来讲讲:重载(Overloading) 一、方法的重载      方法名一样,但参数不一样,这就是重载(overload)。   所谓的参数不一样,主要有两点:第一是参数的个数不一样,第二是参数的...

2015/12/31 13:18
0
0
Java基础学习总结(11)——重载与重写

首先我们来讲讲:重载(Overloading) 一、方法的重载      方法名一样,但参数不一样,这就是重载(overload)。   所谓的参数不一样,主要有两点:第一是参数的个数不一样,第二是参数的...

2016/01/20 14:03
1
1
Java基础学习总结(11)——重载与重写

首先我们来讲讲:重载(Overloading) 一、方法的重载      方法名一样,但参数不一样,这就是重载(overload)。   所谓的参数不一样,主要有两点:第一是参数的个数不一样,第二是参数的...

2016/01/01 17:06
0
0
Java基础学习总结(11)——重载与重写

首先我们来讲讲:重载(Overloading) 一、方法的重载      方法名一样,但参数不一样,这就是重载(overload)。   所谓的参数不一样,主要有两点:第一是参数的个数不一样,第二是参数的...

2015/12/30 16:38
0
0
Java基础学习总结(11)——重载与重写

首先我们来讲讲:重载(Overloading) 一、方法的重载      方法名一样,但参数不一样,这就是重载(overload)。   所谓的参数不一样,主要有两点:第一是参数的个数不一样,第二是参数的...

2015/12/30 18:28
0
0
Java基础学习总结(11)——重载与重写

首先我们来讲讲:重载(Overloading) 一、方法的重载      方法名一样,但参数不一样,这就是重载(overload)。   所谓的参数不一样,主要有两点:第一是参数的个数不一样,第二是参数的...

2015/12/30 18:38
2
0
Java基础学习总结(11)——重载与重写

首先我们来讲讲:重载(Overloading) 一、方法的重载      方法名一样,但参数不一样,这就是重载(overload)。   所谓的参数不一样,主要有两点:第一是参数的个数不一样,第二是参数的...

2015/12/30 18:42
2
0

没有更多内容

加载失败,请刷新页面

返回顶部
顶部