DevOps研发效能
媒体矩阵
开源中国APP
授权协议 Apache
操作系统 跨平台
软件类型 开源软件
所属分类 大数据数据处理
开源组织
地区 国产
投 递 者 文末丶
适用人群 未知
收录时间 2021-12-06

软件简介

实时即未来,Dlink 为 Apache Flink 而生,让 Flink SQL 纵享丝滑,并致力于实时计算平台建设。

Dinky 基于 Apache Flink 实现 Dlink ,增强 Flink 的应用与体验,探索流式数仓。即站在巨人肩膀上创新与实践,Dinky 在未来批流一体的发展趋势下潜力无限。

最后,Dinky 的发展皆归功于 Apache Flink 等其他优秀的开源项目的指导与成果。

特点

一个 开箱即用 易扩展  一站式 实时计算平台,以 Apache Flink 为基础,连接 OLAP  数据湖 等众多框架,致力于 流批一体  湖仓一体 的建设与实践。

其主要目标如下:

  • 可视化交互式 FlinkSQL 和 SQL 的数据开发平台:自动提示补全、语法高亮、调试执行、语法校验、语句美化、全局变量等
  • 支持全面的多版本的 FlinkSQL 作业提交方式:Local、Standalone、Yarn Session、Yarn Per-Job、Yarn Application、Kubernetes Session、Kubernetes Application
  • 支持 Apache Flink 所有的 Connector、UDF、CDC等
  • 支持 FlinkSQL 语法增强:兼容 Apache Flink SQL、表值聚合函数、全局变量、CDC多源合并、执行环境、语句合并、共享会话等
  • 支持易扩展的 SQL 作业提交方式:ClickHouse、Doris、Hive、Mysql、Oracle、Phoenix、PostgreSql、SqlServer 等
  • 支持实时调试预览 Table 和 ChangeLog 数据及图形展示
  • 支持语法逻辑检查、作业执行计划、字段级血缘分析等
  • 支持 Flink 元数据、数据源元数据查询及管理
  • 支持实时任务运维:作业上线下线、作业信息、集群信息、作业快照、异常信息、作业日志、数据地图、即席查询、历史版本、报警记录等
  • 支持作为多版本 FlinkSQL Server 的能力以及 OpenApi
  • 支持易扩展的实时作业报警及报警组:钉钉、微信企业号等
  • 支持完全托管的 SavePoint 启动机制:最近一次、最早一次、指定一次等
  • 支持多种资源管理:集群实例、集群配置、Jar、数据源、报警组、报警实例、文档、用户、系统配置等
  • 更多隐藏功能等待小伙伴们探索

精彩瞬间

flinksqlstudio

selectpreview

checksql

lineage

jobinfo

展开阅读全文

代码

的 Gitee 指数为
超过 的项目

评论

点击加入讨论🔥(1) 发布并加入讨论🔥
发表了资讯
2024/12/18 00:04

Dlink v1.2.0 已经发布,交互式的 FlinkSQL Studio

Dlink v1.2.0 已经发布,交互式的 FlinkSQL Studio 此版本更新内容包括: 新特性 添加 npm 配置 添加错误模板版本号 添加内置的 Flink History Server 以减少未知状态,使 Flink 任务的最终信息更准确 添加了对 Flink 1.20 的支持,并更新了对其他 Flink 版本的依赖 支持作业导出 添加全局 token 支持物理删除资源 支持 paimon hdfs hive 数据源 使用 ingress 地址获取作业信息 Flink SQL 任务支持插入结果预览 添加首次初始化页...

0
0
发表了资讯
2024/03/02 19:29

Dlink 1.0.0 已经发布,交互式的 FlinkSQL Studio

Dlink 1.0.0 已经发布,交互式的 FlinkSQL Studio 此版本更新内容包括: 升级说明 Dinky 1.0 是一个重构版本,对已有的功能进行重构,并新增了若干企业级功能,修复了 0.7 的一些局限性问题。 目前无法直接从 0.7 升级到 1.0。建议重新部署 1.0 版本。 自 Dinky 1.0 版本起,Dinky 社区将不再维护 1.0 之前的所有版本。 自 Dinky 1.0 版本起,Dinky 社区将对 Flink 1.14.x 及以上版本提供支持,不再维护 Flink 1.14 以下的版本。...

0
4
发表了资讯
2023/10/20 22:00

Dlink v0.7.5 已经发布,交互式的 FlinkSQL Studio

Dlink v0.7.5 已经发布,交互式的 FlinkSQL Studio 此版本更新内容包括: 特性: [Feature-2370][connect] 在 flink-connector-jdbc-1.16 中添加过滤能力 [Feature-2381][udf] AGGTABLE 支持表值聚合函数在 Flink 1.16 中使用 修复: [Fix][UDF] 修复 UDF 提交时从 checkpoint 启动失败的问题 [Fix-2392][metadata] 修复 listColumnsSortByPK 方法递归问题 优化: [Optimization-2361][web] 优化无法获取最新状态的作业显示 [O...

0
0
发表了资讯
2023/08/21 00:29

Dlink v0.7.4 已经发布,交互式的 FlinkSQL Studio

Dlink v0.7.4 已经发布,交互式的 FlinkSQL Studio 此版本更新内容包括: 特性: [Feature-1930][client] 从 Flink SQL 分析自定义函数 [Feature-2126][connector] 在 Flink 1.16 中新增 SQLServer Connector [Feature][cdc] CDCSOURCE 支持 Doris 自动建表 修复: [Fix][metadata] 修复 Mysql 自动生成DDL语句时没有数据类型的问题 [Fix][cdc] 修复 CDCSOURCE 整库同步部分问题 [Fix-1958][cdc] 修复当主键没有在表头声明时同步...

0
1
发表了资讯
2022/07/24 00:01

Dlink v0.6.6 发布,交互式的 FlinkSQL Studio

Dlink v0.6.6 已经发布,交互式的 FlinkSQL Studio。 此版本更新内容包括: 新特性: 新增运维中心的作业历史版本列表 新增数据开发的历史版本对比功能 新增 Flink MySql Catalog 新增 FlinkSQLEnv 默认的 Flink Mysql Catalog 新增 1.13 版本 Doris 连接默认隐藏 _DORIS_DELETE 新增 dlink-connector-pulsar 新增选择 Checkpoint 重启任务 升级 Flink 1.15.0 到 1.15.1 新增数据开发的元存储查看 新增数据开发的 Flink 元存储信...

0
6
发表了资讯
2022/04/07 09:18

Dinky 0.6.1 已发布,优化 Flink 应用体验

一、背景 Apache Flink 作为新一代的实时计算框架已经被应用到各个行业与领域,虽说应用程度不同,但都会遇到一些使用上的痛点,基础的应用痛点比如 FlinkSQL 作业提交不友好、作业无监控报警等。很大程度上说,FlinkSQL 大大加快了 Flink 的应用推广,而本文将简述开源项目 Dinky 如何改善 Flink 的痛点来优化 FlinkSQL 应用体验。 https://github.com/DataLinkDC/dlink https://gitee.com/DataLinkDC/Dinky 二、简介 一个 开箱...

0
14
发表了资讯
2022/03/21 20:47

Dlink 0.6.0 已经发布,交互式的 FlinkSQL Studio

Dlink 0.6.0 已经发布,交互式的 FlinkSQL Studio。 此版本更新内容包括: 新功能 新增作业目录树关键字搜索框 新增 F2 全屏开发 新增 K8S 集群配置 新增 Doris 数据源注册、元数据、查询和执行 新增 SqlServer 数据源注册、元数据、查询和执行 新增 Oracle 数据源注册、元数据、查询和执行 新增 Phoenix 数据源注册、元数据、查询和执行 新增 Hive 数据源注册、元数据、查询和执行 新增元数据生成 FlinkSQL 和 SQL 新增 CDCSOU...

2
5
发表了资讯
2022/01/26 18:52

新一代 FlinkSQL 平台,重新定义 Apache Flink 开发

前言 Dinky 0.5.1 已发布,它将重新定义 Apache Flink 的开发运维,让其如虎添翼,降本增效。 现状 Flink Forward Asia 2021 刚刚结束,从 Apache Flink 中文社区发起人、阿里巴巴开源大数据平台负责人王峰(花名莫问)老师得知 Apache Flink 将不止于计算,数仓架构或兴起一轮变革,并且看到越来越多的企业开始大规模应用 Flink 来建设平台。美团数据开发平台负责人鞠大升老师在圆桌会议中提到 FlinkSQL 平台的建设目前是企业应...

7
36
发表了资讯
2022/01/16 23:02

Dlink 0.5.0 已经发布,交互式的 FlinkSQL Studio

Dlink 0.5.0 已经发布,交互式的 FlinkSQL Studio . 此版本更新内容包括: 支持 Kubernetes Session 和 Application 模式提交任务 新增 UDF Java方言的Local模式的在线编写、调试、动态加载 新增 FlinkSQL 执行环境方言及其应用功能 新增 BI选项卡的折线图、条形图、饼图 新增 元数据查看表和字段信息 新增 ChangLog 和 Table 的查询及自动停止实现 新增 Mysql,Oracle,PostGreSql,ClickHouse,Doris,Java 方言 新增 OpenAPI 的执...

0
7
没有更多内容
加载失败,请刷新页面
点击加载更多
加载中
下一页
发表了博客
{{o.pubDate | formatDate}}

{{formatAllHtml(o.title)}}

{{parseInt(o.replyCount) | bigNumberTransform}}
{{parseInt(o.viewCount) | bigNumberTransform}}
没有更多内容
暂无内容
发表了问答
{{o.pubDate | formatDate}}

{{formatAllHtml(o.title)}}

{{parseInt(o.replyCount) | bigNumberTransform}}
{{parseInt(o.viewCount) | bigNumberTransform}}
没有更多内容
暂无内容
暂无内容
1 评论
37 收藏
分享
OSCHINA
登录后可查看更多优质内容
返回顶部
顶部