数据库是“按照数据结构来组织、存储和管理数据的仓库”。是一个长期存储在计算机内的、有组织的、可共享的、统一管理的大量数据的集合。

加载中
置顶
发表了博客
昨天 17:09

时序数据库Influx-IOx源码学习二(环境搭建)

> 欢迎关注微信公众号:atoildw (数据库技术研究) 上一篇介绍了InfluxDB IOx的一些项目背景及现有架构中存在的问题,详情见:https://my.oschina.net/u/3374539/blog/5015114 ### 1.克隆仓库 ``` git clone https://github.com/influxdata/influxdb_iox.git ``` ### 2.安装基础语言依赖 根据`readme`文件中的的描述,项目依赖两个基础环境,分别是`rust`和`clang`。 `rust`是使用`rustup`来进行版本管理的。默认的情况下,会为你... 展开更多

收藏 0
0
置顶
发表了博客
04/10 19:35

时序数据库Influx-IOx源码学习一(项目背景)

## 为什么会发起IOx项目 > 原文请参见: https://www.influxdata.com/blog/announcing-influxdb-iox/ ### 1. 下一步的目标 原文中介绍到,过去的7年时间的发展中,`InfluxDB` 在 `metrics` 数据的处理上已经成为了非常出色的数据库,并且在 `analytics` 方面也很不错。但对于现有的架构来讲有一个限制就是不能处理非常大的基数 (`significant cardinality`),也就是说`tags`里不能设置太多的值。比如说:不能处理分布式追踪数据 ... 展开更多

收藏 0
1
置顶
发表了博客
03/23 10:52

百亿级存储+毫秒级写入:TDengine 在得物 APP 的落地实践

作者|Lynx 导语 :得物许多系统和场景都需要做流量的监控和防护,一天就能够产生数亿数据,写入速度达到万TPS,该数据量级无法用传统的关系型数据库处理。在对比了InfluxDB, OpenTSDB, Cassandra等时序数据库的性能后,最终选择 TDengine。 背景 作为一家互联网电商公司,得物有许多系统和场景都需要做流量的监控和防护,所以在深度定制化开源流控防护组件Sentinel时我们加入了许多功能,帮助提升各业务系统的流控防护。 备注:... 展开更多

收藏 7
2
置顶
发表了博客
03/08 09:20

干货丨DolphinDB即时编译(JIT)详解

DolphinDB是高性能分布式时序数据库,内置了丰富的计算功能和强大多范式编程语言。为了能够提高DolphinDB脚本的执行效率,从1.01版本开始,DolphinDB支持即时编译(JIT)。 1 JIT简介 即时编译(英文: Just-in-time compilation, 缩写: JIT),又译及时编译或实时编译,是动态编译的一种形式,可提高程序运行效率。 通常程序有两种运行方式:编译执行和解释执行。编译执行在程序执行前全部翻译为机器码,特点是运行效率较高,以C... 展开更多

收藏 0
0
置顶
发表了博客
01/18 20:40

时序数据库 Apache-IoTDB 源码解析之元数据索引块(六)

上一章聊到 TsFile 索引块的详细介绍,以及一个查询所经过的步骤。详情请见: [时序数据库 Apache-IoTDB 源码解析之文件索引块(五)](https://my.oschina.net/u/3374539/blog/4499396) 打一波广告,欢迎大家访问 [IoTDB 仓库](https://github.com/apache/iotdb),求一波 Star 。欢迎关注头条号:列炮缓开局,欢迎关注[OSCHINA博客](https://my.oschina.net/u/3374539) 阿里云、东方国信等各家公司正在招聘IoTDB数据库开发工程师... 展开更多

收藏 1
1
置顶
发表了博客
02/02 09:18

干货丨DolphinDB高频数据处理技巧:非等间隔的时间序列处理

高频时间序列的处理中,经常会用到滑动,偏移,聚合,转置,关联等操作。譬如说我想对一个某指标列用过去一个小时的数据的均值来做平滑处理,又或者想找到每一个时刻,该指标一个小时前的相应的指标值。如果序列中每个指标的间隔是相等的而且中间没有缺失数据,譬如说0.5s,3s,那么我们可以把时间窗口转化成固定记录条数的窗口,基本上常用的数据分析软件语言都可以完成滑动窗口函数功能。如果条件不能满足,就变成了比较复杂的... 展开更多

收藏 0
0
置顶
发表了博客
01/19 09:32

干货丨时序数据库DolphinDB历史数据回放教程

一个量化策略在用于实际交易时,处理实时数据的程序通常为事件驱动。而研发量化策略时,需要使用历史数据进行回测,这时的程序通常不是事件驱动。因此同一个策略需要编写两套代码,不仅耗时而且容易出错。在 DolphinDB database 中,用户可将历史数据按照时间顺序以“实时数据”的方式导入流数据表中,这样就可以使用同一套代码进行回测和实盘交易。 DolphinDB的流数据处理框架采用发布-订阅-消费的模式。数据生产者将实时数据继... 展开更多

收藏 0
0
置顶
发表了博客
2020/12/03 14:01

DolphinDB与InfluxDB对比测试报告 第二期

近日,我们曾发布测试报告 DolphinDB与InfluxDB对比测试报告,此报告测试于2018年末。当时的结果显示,DolphinDB Database 的查询性能领先InfluxDB一到三个数据量级,数据导入性能领先一个数量级,数据导出性能相差不大。时隔一年多,DolphinDB与InfluxDB都做了不少功能和性能上的优化,两者的性能究竟有何变化?我们重新对DolphinDB和InfluxDB进行对比测试,测试涵盖数据导入导出、数据查询和磁盘空间占用三个方面。测试的数据... 展开更多

收藏 1
2
置顶
发表了博客
2020/12/02 09:48

DolphinDB与InfluxDB对比测试报告

DolphinDB Database 是一款分析型的分布式时序数据库,内置处理流式数据处理引擎,具有内置的并行和分布式计算的功能,并提供分布式文件系统,支持集群扩展。DolphinDB以C++编写,响应速度极快。提供类似于Python的脚本语言对数据进行操作,支持类标准SQL的语法。提供其它常用编程语言的API,方便与已有应用程序集成。在金融领域中的历史数据分析建模与实时流数据处理,以及物联网领域中的海量传感器数据处理与实时分析等场景中... 展开更多

收藏 4
1
置顶
程序员
发表了资讯
2020/09/17 10:02

松果时序数据库 PinusDB 3.0 Beta 发布

松果时序数据库是一款针对中小规模(设备数少于10万台,每天产生的数据量少于10亿条)场景设计、实现的时序数据库。以简单、易用、高性能为设计目标。使用SQL语句进行交互,具备较低学习、使用成本。 新发布功能: 调整数据格式,新数据格式拥有更高的查询性能,相比于旧版本提升几倍到几十倍的查询性能。新增 tinyint, smallint, int, float 数据类型(旧版本只提供bigint和double)。旧版本bigint采用varint编码,新版本采用固定... 展开更多

收藏 10
置顶
发表了资讯
2020/09/15 07:30

TimescaleDB 1.7.4 发布,基于 PostgreSQL 的时序数据库

TimescaleDB 1.7.4 发布了。TimescaleDB 是基于 PostgreSQL 开发的一款时序数据库,以插件化的形式打包提供。 此版本修复了自 1.7.3 版本以来的 bug,其中有一个在备用节点上的压缩超表上运行查询的问题值得一提: 删除选择路径上的元组锁定 在超表上执行 SELECT 时,无法获取元组锁,因为它们需要交易 ID,而交易 ID 作为临时运行的备用数据库运行时无法创建恢复模式。 详情查看更新说明: https://github.com/timescale/times... 展开更多

收藏 8
置顶
发表了资讯
2020/07/26 07:58

InfluxDB 2.0.0 Beta 15 发布,开源时序数据库

InfluxDB 2.0.0 Beta 15 现已发布,具体更新内容如下: Breaking 004:从 influxd 二进制文件中删除了 migration 命令。 18921:受限制的 UI 变量名称不与 Flux 保留字冲突 Features 18888:将事件源添加到 Influx 堆栈操作中 18910:添加堆栈的卸载功能 18912:删除不推荐使用的 Influx pkg command tree 18997:将 Telegraf 管理命令添加到 Influx CLI 19030:为 influx CLI 配置文件启用动态目标 19029:离开 dashboard 会取... 展开更多

收藏 3
置顶
发表了资讯
2020/08/09 07:55

InfluxDB 2.0.0 Beta 16 发布,开源时序数据库

InfluxDB 2.0.0 Beta 16 现已发布,具体更新内容如下: Breaking 19066:弃用不推荐使用的 /packages route tree 19116:支持更多类型的模板 envRef 默认值,并且需要明确的默认值 19104:从 API 中删除 orgs/labels 嵌套路由。 Features 19075:从公共的 HTTP API list/read 调用中添加资源链接到堆栈的资源 19103:在达到极限时增强资源创建体验 19223:将 dashboards 命令添加到 Influx CLI 19225:允许 user onboarding 时选... 展开更多

收藏 2
置顶
发表了资讯
2020/07/12 07:55

InfluxDB 2.0.0 Beta 14 发布,开源时序数据库

InfluxDB 2.0.0 Beta 14 现已发布,具体更新内容如下: Features 18758:扩展流入堆栈更新cmd,无需添加模板即可添加资源 18793:在新的 /api/v2/templates 和 /api/v2/stacks public API 下标准化 InfluxDB 模板 18818:使用种类标识符扩展 template Summary 和 Diff 嵌套类型。 18857:Flux 更新至 v0.71.1 18805:为 Linux 添加了静态构建 Bug 修复 18878:不要覆盖通过 ldflags 设置的构建日期 18842:修复了导入一个 Chec... 展开更多

收藏 4
置顶
发表了资讯
2020/06/15 07:15

InfluxDB 2.0.0 Beta 12 发布,开源时序数据库

InfluxDB 2.0.0 Beta 12 现已发布,具体更新内容如下: Features 8279:通过堆栈将所有 pkg 应用程序设为有状态 18322:增加将堆栈现有的(平台中的)资源状态导出为 pkg 的功能。 18334:以改进的用法和长格式示例更新了 influx pkg 命令。 18344:使用版本和 User-Agent 扩展 Influx CLI。 18355:集成了 RedirectTo 功能,因此,CLOUD 用户现在可以在登录后导航回原始链接的页面 18392:在模板下合并 pkg influx 命令。这会除... 展开更多

收藏 5
置顶
发表了资讯
2020/04/14 07:14

InfluxDB 2.0.0 Beta 8 发布,开源时序数据库

InfluxDB 2.0.0 Beta 8 现已发布,具体更新内容如下: Features 17490:influx config -,切换回先前的激活配置 17581:介绍新的导航菜单 17595:将-f(--file)选项添加到influx query和influx task命令 17498:添加了对命令行选项的支持,以限制查询的内存 Bug 修复 17612:在仪表板索引视图中修复卡的大小和布局问题 17651:修复了默认为黑色的检查图字体和线条,导致图不可读 17660:修复了向资源添加标签时文本换行显示问题... 展开更多

收藏 3
置顶
发表了资讯
2020/03/21 07:27

TimescaleDB 1.6.1 发布,基于 PostgreSQL 的时序数据库

TimescaleDB 1.6.1 发布了。TimescaleDB 是基于 PostgreSQL 开发的一款时序数据库,以插件化的形式打包提供。 此维护版本包含自 1.6.0 版本以来的错误修复,尤其是解决了连续聚合、time_bucket_gapfill、部分索引处理和 drop_chunks 中的错误。 仅对于此发行版,需要在升级后重新启动数据库,然后才能恢复备份。 新版本特性 支持 drop_chunks API 进行连续聚合 更改日志级别以获取连续的汇总实现消息 更多详情见更新说明: http... 展开更多

收藏 6
置顶
发表了资讯
2020/03/30 08:00

InfluxDB 2.0.0 Beta 7 发布,开源时序数据库

InfluxDB 2.0.0 Beta 7 现已发布,具体更新内容如下: Features 17232:允许仪表板以浅色模式显示(可选) 17273:为 influx cli 添加 shell 完成命令 17353:通过 meta.name 字段使所有 pkg 资源唯一 17363:创建后无法再检索 Telegraf 配置令牌,但是可以在设置 Telegraf 后创建新令牌 17400:可以通过 cli 按名称删除 bucket 17396:添加模块以将行数据写入指定的 url、org 和 bucket 17448:为 pkger 堆栈、有状态的程序包管... 展开更多

收藏 2
置顶
发表了资讯
2020/03/01 07:56

InfluxDB 2.0.0 Beta 5 发布,开源时序数据库

InfluxDB 2.0.0 Beta 5 现已发布,具体更新内容如下: Features 16991:更新了 v0.61 的 Flux functions list 16574:将安全标志添加到会话 cookie Bug 修复 16919:按字母顺序对首页上的仪表板进行排序 16934:“Tokens”页面现在按 status 排序 16931:在检查中设置标签的默认值 16935:修正按变量类型排序 16973:当线的长度不同时,计算正确的堆积线累积 17010:修复了scrollbar 问题,其中 resource cards 会使父容器溢出,... 展开更多

收藏 2
置顶
发表了资讯
2020/03/16 06:48

InfluxDB 2.0.0 Beta 6 发布,开源时序数据库

InfluxDB 2.0.0 Beta 6 现已发布,具体更新内容如下: Features 17085:单击 bucket name 将用户带到已选择 bucket 的Data Explorer 17095:使用表视图支持扩展 pkger 仪表板 17114:允许 retention 作为持续时间提供给 influx setup 命令 17138:扩展 pkger 出口的所有功能,支持利用 lable name 和资源类型过滤 17049:为云用户添加了新的登录和注册屏幕,该屏幕允许从其区域直接登录 17170:添加了新的 CLI 多配置文件管理工... 展开更多

收藏 1
没有更多内容
加载失败,请刷新页面
点击加载更多
加载中
下一页
返回顶部
顶部