Qualitis 正在参加 2020 年度 OSC 中国开源项目评选,请投票支持!
Qualitis 在 2020 年度 OSC 中国开源项目评选 中已获得 {{ projectVoteCount }} 票,请投票支持!
投票让它出道
已投票
Qualitis 获得 2020 年度 OSC 中国开源项目评选「最佳人气项目」 !
Qualitis 获得 2020 年度 OSC 中国开源项目评选「最佳人气项目」「最积极运营项目」 !
Qualitis 获得 2020 年度 OSC 中国开源项目评选「最积极运营项目」 !

软件简介

Qualitis 是一个支持多种异构数据源的质量校验、通知、管理服务的数据质量管理平台,用于解决业务系统运行、数据中心建设及数据治理过程中的各种数据质量问题。

Qualitis 基于 Spring Boot,依赖于Linkis进行数据计算,提供数据质量模型构建,数据质量模型执行,数据质量任务管理,异常数据发现保存以及数据质量报表生成等功能。并提供了金融级数据质量模型资源隔离,资源管控,权限隔离等企业特性,具备高并发,高性能,高可用的大数据质量管理能力。

核心特点

  • 数据质量模型定义
    支持以下数据模型定义:
    1.单表校验数据模型。
    2.跨表校验数据模型。
    3.自定义校验数据模型。

同时,系统预置了多个数据质量校验模版,包括空值校验,枚举校验等常用校验,并且支持自定义规则生成数据质量模版,单表数据质量模板以及跨表数据质量模板的定义。

  • 数据质量模型调度
    支持数据质量模型调度。

  • 数据质量报表
    支持生成数据质量报表

  • 日志管理 日志聚合管理,方便排查数据质量任务

  • 异常数据管理 支持异常数据提取和存储,快速定位问题

  • 支持工作流 支持在工作流当中进行数据质量校验
    工作流必装DataSphereStudio.

  • 管理员控制台
    提供管理员控制台界面,支持人员管理,权限管理,元数据管理,系统参数配置等管理功能。

架构

 

展开阅读全文

代码

的 Gitee 指数为
超过 的项目

评论 (0)

加载中
更多评论
2020/12/28 19:36

微众开源 Qualitis 0.8.0 版本发布

【重磅发布】Qualitis 0.8.0 版本发布 大家期待已久的Qualitis 0.8.0来啦! Qualitis 0.8.0 Qualitis是微众银行开源的一款数据质量管理系统,用于解决业务系统运行、数据中心建设及数据治理过程中的各种数据质量问题。它提供了一整套统一的流程来定义和检测数据集的质量并及时报告问题。 开源链接: https://github.com/WeBankFinTech/Qualitis。 特性增强 1. 对UI进行优化重构,并开源全部前端源码; 2. 重构“规则查询”界面的前...

2
9
没有更多内容
加载失败,请刷新页面
点击加载更多
加载中
下一页
2020/12/21 20:56

【重磅发布】Qualitis 0.8.0 版本发布

【重磅发布】Qualitis 0.8.0 版本发布 大家期待已久的Qualitis 0.8.0来啦! Qualitis 0.8.0 Qualitis是微众银行开源的一款数据质量管理系统,用于解决业务系统运行、数据中心建设及数据治理过程中的各种数据质量问题。它提供了一整套统一的流程来定义和检测数据集的质量并及时报告问题。 开源链接: https://github.com/WeBankFinTech/Qualitis。 特性增强 1. 对UI进行优化重构,并开源全部前端源码; 2. 重构“规则查询”界面的前...

0
1
发表于云计算专区
2019/12/10 12:31

Qualitis数据质量管理系统,让异常数据无处藏身

“Qualitis是微众银行开源的一款数据质量管理系统,用于解决业务系统运行、数据中心建设及数据治理过程中的各种数据质量问题。 开源链接: https://github.com/WeBankFinTech/Qualitis。” 01 — Qualitis是什么 Qualitis是一个数据质量管理系统,用于监控数据质量。它提供了一整套统一的流程来定义和检测数据集的质量并及时报告问题。 Qualitis基于Spring Boot开发,依赖于Linkis进行数据计算,提供数据质量规则构建,数据质量规...

0
2
发表于云计算专区
2020/02/12 20:11

【重磅发布】DataSphere Studio 0.7.0 版本发布

01 — DataSphere Studio是什么 DataSphere Studio (简称DSS)是微众银行自研的一站式数据应用开发管理门户,将满足从数据交换、脱敏清洗、分析挖掘、质量检测、可视化展现、定时调度到数据输出等数据应用开发全流程场景需求。 开源地址:https://github.com/WeBankFinTech/DataSphereStudio。 DataSphere Studio详细介绍:DataSphere Studio,打造一站式数据应用开发管理门户 02 — DataSphere Studio 0.7.0新版本特性 DataSp...

0
0
2020/03/23 15:22

拥抱开源,共建未来--WeDataSphere 开发者社区首次线上Meetup活动回顾

“ 本周一,微众银行开源的一站式金融级大数据平台套件WeDataSphere(简称WDS),成功组织了首次开发者社区的线上meetup,邀请了包括BOSS直聘、天翼云、艾佳生活、海康威视、mobtech、招联金融等在内的18家WDS开源社区开发贡献者单位参会。” 会议就WDS开源项目Contributing 规范、已开源组件2020年开发规划、新组件开源计划等议题,进行了深入的沟通探讨,并对社区开发者提出的问题进行了回答讨论。具体议题如下:1. WeDataSp...

0
0
发表于云计算专区
2020/03/22 23:25

拥抱开源,共建未来--WeDataSphere 开发者社区首次线上Meetup活动回顾

“ 本周一,微众银行开源的一站式金融级大数据平台套件WeDataSphere(简称WDS),成功组织了首次开发者社区的线上meetup,邀请了包括BOSS直聘、天翼云、艾佳生活、海康威视、mobtech、招联金融等在内的18家WDS开源社区开发贡献者单位参会。” 会议就WDS开源项目Contributing 规范、已开源组件2020年开发规划、新组件开源计划等议题,进行了深入的沟通探讨,并对社区开发者提出的问题进行了回答讨论。 具体议题如下: 1. WeDataS...

0
0
发表于云计算专区
2019/12/11 12:01

DataSphere Studio 0.6.0 版本发布

01 — DataSphere Studio是什么 DataSphere Studio (简称DSS)是微众银行自研的一站式数据应用开发管理门户,将满足从数据交换、脱敏清洗、分析挖掘、质量检测、可视化展现、定时调度到数据输出等数据应用开发全流程场景需求。 开源地址:https://github.com/WeBankFinTech/DataSphereStudio。 DataSphere Studio详细介绍:DataSphere Studio,打造一站式数据应用开发管理门户 02 — DataSphere Studio 0.6.0新版本特性 DataSp...

0
0
2020/04/22 19:37

【喜讯】恭喜Linkis在github上的star数破1000

xing 星 xing 星 po 破 qian 千 就在今天,历时9个月的Linkis得到了第1000颗小星星! WeDataSphere 团队-深圳小伙伴 上海小伙伴 Linkis Linkis 是微众银行自主研发并开源的计算中间件,关注的是复杂分布式架构环境下,上层应用和底层计算(存储)引擎之间,各种类型的计算任务(如Spark、Hive和Python等)的连接、提交执行和管理问题。WeDataSphere 团队始终致力于通过开源开放的方式,推动计算中间件Linkis,成为便捷智能又强大...

0
1
发表于云计算专区
2019/12/02 12:40

DataSphere Studio,打造一站式数据应用开发管理门户

“ DataSphere Studio(简称DSS)是微众银行自研的一站式数据应用开发管理门户。基于插拔式的集成框架设计,及计算中间件Linkis,可轻松接入上层各种Web系统,让数据开发变得简洁又易用。” DataSphere Studio Github地址: https://github.com/WeBankFinTech/DataSphereStudio 01 — DSS是什么? DataSphere Studio(简称DSS)定位为数据应用开发门户,闭环涵盖数据应用开发全流程。在统一的UI下,以工作流式的图形化拖拽开发体...

0
2
发表于云计算专区
2020/06/28 17:42

DataSphere Studio 0.8.0 版本发布

DataSphere Studio 0.8.0 版本发布 DSS0.8.0 “DataSphere Studio(简称DSS)是微众银行自研的一站式数据应用开发管理门户,将满足从数据交换、脱敏清洗、分析挖掘、质量检测、可视化展现、定时调度到数据输出等数据应用开发全流程场景需求。开源地址:https://github.com/WeBankFinTech/DataSphereStudio。” DataSphere Studio 0.8.0新版本特性 01 特性增强 1. 更新DataSphereStudio的Linkis版本为0.9.4,并解决一些兼容问题。...

0
0
发表于云计算专区
2019/09/30 17:23

Linkis数据中间件,打造全面连通融合的金融级大数据平台

“ Linkis是微众银行开源的一款数据中间件,用于解决前台各种工具、应用,和后台各种计算存储引擎间的连接、访问和复用问题。开源链接: https://github.com/WeBankFinTech/Linkis。” 01 — Linkis是什么? Linkis,是一个打通了多个计算存储引擎如Spark、TiSpark、Hive、Python和HBase等,对外提供统一JDBC、REST、WebSocket、Java和Python等接口,提交执行SQL、Pyspark、HiveQL、Scala等脚本的数据中间件。 Linkis基于微服务架...

0
1
没有更多内容
加载失败,请刷新页面
点击加载更多
加载中
下一页
暂无内容
0 评论
22 收藏
分享
OSCHINA
登录后可查看更多优质内容
返回顶部
顶部