1. 概述 gmq是基于redis提供的特性,使用go语言开发的一个简单易用的队列；关于 redis 使用特性可以参考之前本人写过一篇很简陋的文章 Redis 实现队列；gmq的灵感和设计是基于...

Hazelcast Jet 是一个分布式计算平台，专为高性能流处理和快速批处理而构建。它在内存数据网格（IMDG）中嵌入Hazelcast，以提供轻量级的处理器包和可扩展的内存存储。 特性： 低...

Cascading是一个新式的针对Hadoop clusters的数据处理API，它使用富于表现力的API来构建复杂的处理工作流，而不是直接实现Hadoop MapReduce的算法。

为了解决大数据、AI 等数据密集型应用在云原生计算存储分离场景下，存在的数据访问延时高、联合分析难、多维管理杂等痛点问题，南京大学 PASALab、阿里巴巴、Alluxio 在 2020 年 9...

MacroBase 是一个数据分析工具，利用机器学习优先处理大型数据集。 具体来说，MacroBase 是一个新的分析监督引擎，旨在进行大型数据集和数据流优先处理。与传统的分析引擎不同，Macr...

Wormhole 是一个 SPAAS（Stream Processing as a Service）平台解决方案。Wormhole 面向大数据项目的开发，运维以及管理人员，致力于简化和统一开发管...

golang 版本的 hangout，有效缓解内存问题。 hangout 是一款仿 Logstash 的应用，用 java 实现了 Logstash 的几个常用 input/filter/out...

Arctic 是由网易开源的流式湖仓系统，Arctic 在 Iceberg 和 Hive 之上添加了更多实时场景的能力，并且面向 DataOps 提供流批统一，开箱即用的元数据服务，让数据湖更加...

Apache DataSketches 是开源的高性能大数据流算法库，主要针对大规模计算环境。Apache DataSketches 的专用流算法库（也被称为 sketches）包含小型数据结构...

Coronavirus Tracker API 是一个简单快速的 API，用于跟踪全球新冠病毒（SARS-CoV-2）的感染情况，包括有关确诊病例、死亡人数和康复人数。使用 FastAPI 框架...

OpenMetadata 是元数据的开放标准，发现、协作和正确获取数据的单一场所。 OpenMetadata 包括以下内容： 元数据模式- 定义元数据的核心抽象和词汇表，其中包含类型、实体、实体...

OSSEAN是一个全球开源软件实时分析监测系统，通过对全球主流开源社区进行持续数据实时采集和跨社区深度关联分析，提供开源项目检索、评估和排行等服务。开发单位为国防科技大学。 特性 社区覆盖面广 ...

Hadapt 是个自适应分析平台，为 Apache Hadoop 开源项目带来了 SQL 实现。Hadoop 非常健壮，并且可伸缩。所以通过其合并了关联数据存储的混合存储层，Hadapt 允许进...

iceoryx 是一个适用于各种操作系统的进程间通信（IPC）中间件（目前已支持 Linux、macOS 和 QNX）。它起源于汽车行业，当涉及到驾驶辅助或自动驾驶系统时，大量的数据必须在不同的...

python 天气雷达数据处理包。 wradlib 使用 Travis CI 进行持续集成。这意味着一旦将新代码推送到 wradlib 存储库，Travis 将运行一组测试。若测试顺利进行，将在...

Pothos 项目是一个完善的数据流框架，用于创建互相连接的数据处理模块拓扑图。数据处理的拓扑图可以进行图形化的设计和测试，并应用到设备网络。 Pothos framework API 是平滑的...

Apache Daffodil 是 DFDL 规范的开源实现，该规范使用 DFDL 数据描述将固定格式的数据解析为信息集。通常将此信息集转换为 XML 或 JSON，以允许通过公认的 XML 或...

PDCache 是一个轻量级，高可靠性，强一致性，基于 java 内部 Reference 工具的数据缓存工具，用于在程序内部缓存可丢失型的数据。也可用 Map 实现的根据 id 保存的数据或可...

COOPER 平台通过分析软件开发者大数据对开发者进行全方位画像和协作关系分析，并构建软件开发者知识图谱，在此基础上提供开发者和开发资源的智能搜索与推荐服务。 平台详细描述： COOPER 平台...

Data Accelerator 的一些方法可以更容易地在 Apache Spark 上构建流式传输管道： 即插即用：轻松设置输入源和输出接收器，以便在几分钟内建立管道。Data Acceler...