数据库是“按照数据结构来组织、存储和管理数据的仓库”。是一个长期存储在计算机内的、有组织的、可共享的、统一管理的大量数据的集合。

加载中
置顶
发表了博客
09/23 18:14

2021年ClickHouse最王炸功能来袭,性能轻松提升40倍

各位,今年 ClickHouse 最王炸的功能来啦,没错,就是期待已久的 Projection (投影) 功能。ClickHouse 现在的功能已经非常丰富强大了,但是社区用现实告诉我们,还可以进一步做的更好:) 不知道你有没有碰到过这些情况: MergeTree 只支持一种排序规则 建表的时候,Order By 同时决定了主键稀疏索引和数据的排序,假设 : Order BY A,B,C 那么通常过滤查询 Where A 会很快,但是 Where C 会慢一些。 物化视图不够智能 针对固定的... 展开更多

收藏 5
0
置顶
架构师
发表了博客
09/16 22:09

MySQL技术专题(6)这也许是你的知识盲区-MySQL主从架构以及[半同步机制]

### MySQL的主从复制 - 一般在大规模的项目上,都是使用MySQL的复制功能来创建MySQL的主从集群的。 - 主要是可以通过为数据库服务器配置一个或多个备库的方式来进行数据同步。 - 复制的功能不仅有利于构建高性能应用,同时也是高可用、可扩展性、灾难恢复、备份以及数据仓库等工作的基础。 - 通过MySQL的主从复制来实现读写分离,相比单点数据库又读又写来说,提升了业务系统性能,优化了用户体验。 - 另外通过主从复制实现了数... 展开更多

收藏 5
0
置顶
发表了问答
09/23 10:15

元数据管理

现在数据字典这块,现在仅管理字段集的,没有管理元数据这块的,我觉得对于层级管理来说,以及模型快速构造确实挺好的,你看增加下是否好点呢? 另外就是能不能增加导出成EXCEL呢

收藏 0
置顶
程序员
发表了博客
09/20 07:22

Group By 深度优化,真是绝了!

作者:谦虚的小K 来源:www.juejin.cn/post/6957696820621344775 ### 导读 当我们交友平台在线上运行一段时间后,为了给平台用户在搜索好友时,在搜索结果中推荐并置顶他感兴趣的好友,这时候,我们会对用户的行为做数据分析,根据分析结果给他推荐其感兴趣的好友。 > 这里,我采用最简单的SQL分析法:对用户过去查看好友的性别和年龄进行统计,按照年龄进行分组得到统计结果。依据该结果,给用户推荐计数最高的某个性别及年龄的... 展开更多

收藏 6
0
置顶
发表了资讯
09/21 08:25

全球 46% 的本地数据库包含漏洞,中国排名第五

网络安全解决方案提供商 Imperva 最新发布的一项研究报告指出,全球近一半(46%)的本地数据库容易受到攻击。该报告基于 Imperva Research Labs 进行的一项为期五年的纵向研究,共分析了近 27000 个数据库及其安全状况。 研究发现,平均每个数据库包含 26 个安全漏洞;其中 56% 被列为“high”或“critical”严重性错误,包括可用于劫持整个数据库及其中包含的信息的代码执行漏洞。“这表明许多组织没有优先考虑其数据的安全性,... 展开更多

收藏 2
置顶
程序员
发表了资讯
09/20 07:58

DBeaver 21.2.1 发布,可视化数据库管理平台

DBeaver 21.2.1 现已发布。DBeaver是一个免费开源的通用数据库工具,适用于开发人员和数据库管理员。 主要更新内容 Data 浏览器 重新设计了布尔值渲染配置 添加了 "带时区的时间/时间戳" 类型的特殊格式 高级粘贴:添加了配置对话框 基数转换器已修复 添加了数字转换器 几何数据类型编辑器已修复(Exasol、Oracle) 值面板现在保存上次使用的内容查看器设置 数据传输 输出设置配置器已修复 外部进程执行已修复(反斜杠转义) 从... 展开更多

收藏 4
置顶
发表了资讯
09/18 16:04

Apache Kyuubi 1.3.0-incubating 发布,通用 JDBC 和 SQL 执行引擎

Kyuubi 进入 Apache 孵化器后首次发布大版本 9月14日,Apache Kyuubi (Incubating) 社区发布了进入 Apache 孵化器后的第一个公开发行的正式版本,该版本的代号为 v1.3.0-incubating。 对于作为新晋 Apache 孵化器项目的 Kyuubi 而言,成为 Apache Top Level Project(TLP) 是其目标, 对于正式版本的发布我们需要深刻地践行 Apache Way,遵循社区的 RELEASE POLICY。和 TLP 们不同的是,孵化器项目需要通过两轮投票才能正式完成... 展开更多

收藏 4
置顶
发表了博客
09/18 10:16

教你用Python 编写 Hadoop MapReduce 程序

摘要:Hadoop Streaming 使用 MapReduce 框架,该框架可用于编写应用程序来处理海量数据。 本文分享自华为云社区《Hadoop Streaming:用 Python 编写 Hadoop MapReduce 程序》,作者:Donglian Lin。 随着数字媒体、物联网等发展的出现,每天产生的数字数据量呈指数级增长。这种情况给创建下一代工具和技术来存储和操作这些数据带来了挑战。这就是 Hadoop Streaming 的用武之地!下面给出的图表描绘了从2013年起全球每年产生的数... 展开更多

收藏 1
0
置顶
程序员
发表了博客
09/18 10:25

MySQL 是如何实现 ACID 的?

来源:https://llc687.top/131.html > 本文主要探讨MySQL InnoDB 引擎下ACID的实现原理,对于诸如什么是事务,隔离级别的含义等基础知识不做过多阐述。 ## ACID MySQL 作为一个关系型数据库,以最常见的 InnoDB 引擎来说,是如何保证 ACID 的。 - **(Atomicity**)**原子性:** 事务是最小的执行单位,不允许分割。原子性确保动作要么全部完成,要么完全不起作用; - **(Consistency)一致性:** 执行事务前后,数据保持一致;... 展开更多

收藏 14
3
置顶
发表了博客
09/06 15:57

深度解析|Apache Doris 索引机制解析

1 引言 Apache Doris 存储引擎采用类似 LSM 树的结构提供快速的数据写入支持。进行数据导入时,数据会先写入 Tablet 对应的 MemTable 中,当 MemTable 写满之后,会将 MemTable 里的数据刷写(Flush)到磁盘,生成一个个不超过 256MB 的不可变的 Segment 文件。 MemTable 采用 SkipList 的数据结构,将数据暂时保存在内存中,SkipList 会按照 Key 对数据行进行排序,因此,刷写到磁盘上的 Segment 文件也是按 Key 排序的。Apach... 展开更多

收藏 1
0
置顶
发表了博客
09/14 17:32

TDengine在同花顺组合管理业务中的优化实践

#### 前言 同花顺每天需要接收海量交易所行情数据,确保行情数据的数据准确。但由于该部分数据过于庞大,而且使用场景颇多,每天会产生很多的加工数据,而组合管理(PMS)还会使用到历史行情数据。之前虽然采用了Postgres+LevelDB作为数据的存储方案,但仍然有不少痛点,所以必须对存储方案进行改造。 通过对ClickHouse、InfluxDB、TDengine等时序数据存储方案的调研,最终我们选择了TDengine。大数据监控平台采用TDengine后,在稳... 展开更多

收藏 2
1
置顶
发表了博客
09/02 10:16

多年DBA实战经验:Greenplum数据库优化技巧与实践

了解更多Greenplum相关内容,欢迎访问Greenplum中文社区网站 熟悉Greenplum的小伙伴都知道,Greenplum是一款分布式数据库。MPP架构相较于传统的SMP架构更能快速响应分析型应用的需求。利用MPP架构的优势,Greenplum可以处理海量数据。2021数据库大咖讲坛第6期《数据库性能优化技巧与最佳实践》活动中,来自Greenplum中文社区的阿福(苑泽福)发表演讲《Greenplum数据库优化技巧与实践》。下面让我们通过本篇文章回顾一下精华内容... 展开更多

收藏 1
0
置顶
发表了博客
09/16 11:29

KVSSD: 结合 LSM 与 FTL 以实现写入优化的 KV 存储

本次分享的 Paper[1]:《 KVSSD:Close integration of LSM trees and flash translation layer for write-efficient KV store 》是在 18 年的 Design, Automation & Test in Europe Conference & Exhibition (DATE) 会议上出现的 KVSSD,作者为:Sung-Ming Wu[2]、Kai-Hsiang Lin[3]、 Li-Pin Chang[4]。 这篇 Paper 主要思路是在 SSD 上直接提供 KV 接口,将 LSM Tree 与 FTL 深度结合,从而避免从 LSM Tree,主机文件系统到 ... 展开更多

收藏 1
0
置顶
程序员
发表了问答
09/16 18:25

Oracle分页后神奇问题

数据库类型: Oracle 11g 问题: 执行一条SQL,查询的结果数字字段神奇的变成了1。 先看原始数据, 查询的结果是3,未排序之前,查询的结果是正确的 id和type都对的上,放开排序之后,type变成了1 百思不得其解,求大佬指点一二

收藏 0
置顶
发表了博客
09/16 11:31

OpenMetric与时序数据库模型之主流TSDB分析

摘要:为大家带来当下时序数据模型的主流TSDB分析及云厂商在时序数据模型方面的最新动态。 本文分享自华为云社区《【万字干货】OpenMetric与时序数据库存储模型分析(下)》,作者:敏捷的小智 。 在上篇《【万字干货】OpenMetric与时序数据库存储模型分析(上)》文章中,我们了解了时序数据模型的相关知识内容,接下来为大家分析当下主流TSDB及云厂商在书序数据模型方面的最新动态。 主流TSDB分析 InfluxDB InfluxDB[9]是一个... 展开更多

收藏 0
0
没有更多内容
加载失败,请刷新页面
点击加载更多
加载中
下一页
返回顶部
顶部