本专区由 数据库 团队提供资讯和技术支持，欢迎社区成员申请加入管理小组。
数据库是“按照数据结构来组织、存储和管理数据的仓库”。是一个长期存储在计算机内的、有组织的、可共享的、统一管理的大量数据的集合。
加载中
置顶
发表了博客
2021/07/08 15:03
导读 KaiwuDB 是浪潮开源的 NewSQL 分布式数据库，拥有强一致、高可用的分布式架构。在高负载的情况下，分布式数据库能够将负载压力平衡到不同的物理机节点上，充分利用不同节点的资源。本文将介绍 KaiwuDB 在面对高负载存储过程中采用的负载均衡策略。 负载均衡 作为分布式数据库，为了更有效利用不同物理机节点的资源， 避免服务器性能的浪费，在数据库高负载的情况下需要尽量将压力平衡到各个物理机节点上。这也是分布式数据... 展开更多
置顶
发表了博客
2021/05/31 11:03
作者：管延信 上期回顾：深入解析 Raft 模块在 KaiwuDB 中的优化改造（上） 导读 KaiwuDB 是由浪潮开源的一款 NewSQL 分布式数据库，具备 HTAP 特性，拥有强一致、高可用的分布式架构。其中，KaiwuDB 各方面的强一致性都依靠 Raft 算法实现。我们在上一篇文章中介绍了 Raft 一致性算法在分布式数据库中发挥的重要作用，以及 KaiwuDB 根据自身需求对 Raft 算法进行了优化改造，为其新增了三种角色设计。本文将继续介绍 KaiwuDB ... 展开更多
置顶
发表了博客
2021/05/31 11:01
作者：管延信 导读 KaiwuDB 是由浪潮开源的一款 NewSQL 分布式数据库，具备 HTAP 特性，拥有强一致、高可用的分布式架构。对于一个高可用的分布式系统来说，为了保障不同集群不同节点的数据一致，一致性算法尤为重要。Raft 是一种管理日志复制的分布式一致性算法，包括 KaiwuDB 在内的很多分布式系统都采用 Raft 作为底层的一致性协议。本系列文章将为大家介绍 Raft 一致性算法在 KaiwuDB 中的落地实践，并深入解析 KaiwuDB 技术... 展开更多
置顶
发表了博客
2021/05/28 14:03
作者：马静伟 编辑：大东BE 导读 TP 与 AP 融合的 HTAP 数据库正成为业内的发展趋势。但由于大规模数据场景下 TP 与 AP 系统本身的复杂性，要在一套数据库系统中融合两种使用场景的功能并不容易。浪潮推出的 HTAP 数据库 ZNBase 采用多模存储引擎的方案实现 HTAP 特性，在 OLTP 的基础上引入列存引擎支撑 OLAP 场景。本文将着重介绍列存引擎技术在 HTAP 数据库 ZNBase 中扮演的重要角色。 OLTP 与 OLAP 名词释义 OLTP，全称 On... 展开更多
置顶
发表了博客
2021/05/21 10:47
本文基于 Apahce Spark 3.1.1 版本，讲述 AQE 自适应查询优化的原理，以及网易数帆在 AQE 实践中遇到的痛点和做出的思考。 前言 自适应查询优化(Adaptive Query Execution, AQE) 是 Spark 3.0 版本引入的重大特性之一，可以在运行时动态的优化用户的 SQL 执行计划，很大程度上提高了 Spark 作业的性能和稳定性。AQE 包含动态分区合并、Join 数据倾斜自动优化、动态 Join 策略选择等多个子特性，这些特性可以让用户省去很多需要根... 展开更多
置顶
发表了博客
2021/04/30 14:25
作者：尹飞 小T导读 ：顺丰科技大数据集群每天需要采集海量监控数据，以确保集群稳定运行。之前虽然采用了OpenTSDB+HBase作为大数据监控平台全量监控数据的存储方案，但有不少痛点，必须对全量监控数据存储方案进行改造。通过对IoTDB、Druid、ClickHouse、TDengine等时序数据存储方案的调研，最终我们选择了TDengine。大数据监控平台采用 TDengine 后，在稳定性、写入性能、查询性能等方面都有较大的提升，并且存储成本降低为原... 展开更多
置顶
发表了博客
2021/04/27 11:40
前不久，PingCAP 刚刚度过六岁生日。对于数据库这样一个古老的行业，六年只是刚刚起步。TiDB 5.0 的发布就像一个庆祝成长的生日礼物，为 TiDB 带来了一个具有里程碑意义的版本。通过引入 MPP （Massively Parallel Processing，大规模并行处理）架构，年轻的 TiDB 已经成为一款具备完整 HTAP 能力的分布式数据库。 **PingCAP 联合创始人兼 CTO 黄东旭在 TiDB 5.0 发布会上进行了《What’s Next? 新一代数据库的构想》的精彩演讲... 展开更多
置顶
高级程序员
发表了博客
2021/04/25 18:55
> 分库分表、分区能解决很多的问题，这也是我们在优化的时候常常听到的一些可行的方案，不过提到优化就来分库分表是不是不太合适，本文所阐述的就是分库分表、分区，什么时候用，应该怎么用，怎么选择。 ### 话题起点 最近听到一些学员的面试复述，基本很多的人去面试的时候都会碰到要对MySQL进行优化这样的题目，很多学员很有经验的学员也在这上面栽了跟头。基本回答有几种 - 加索引 - 分库分表 - 分区 - 读写分离 - 冷热数据处... 展开更多
置顶
发表了博客
2021/04/16 09:39
Copyset模块结合chunk的放置共同解决了集群数据如何分布的问题，这里主要的设计考虑点是数据分布的均衡性以充分利用磁盘空间和避免热点。 1. 背景 Curve是网易数帆在2020年7月份开源的一个高性能、高可用、高可靠的分布式存储系统，主打高性能、低延迟。 Github代码仓库：https://github.com/opencurve/curve Curve存储系统的基础设计框架与经典的GFS基本类似，采⽤有中心节点的架构，核心服务由4个部分组成： 元数据节点MDS，主... 展开更多
置顶
高级程序员
发表了博客
2021/02/19 14:24
 # 前言 我们都知道，所谓的数据结构，都是我们在为了更好的对数据的增删改查而创造出来的对数据的结构设计，但是我们要知道的是，这些数据结构都是抽象的逻辑结构，并不是真实的物理上的存储结构，大部分时候，我们对数据结构的讨论，也都是讨论的是逻辑上的数据结构，并不是对真实的存储在硬盘中的数据的存储结构的讨论。 真实的物理上的... 展开更多
置顶
发表了博客
2021/02/19 14:14
 作者| 王涛（扬礼）、车漾（必嘫） 来源|[阿里巴巴云原生公众号](https://mp.weixin.qq.com/s/cvj5_0Hxb84-wj6Q-19P4A) # 什么是 Fluid [Fluid](https://github.com/fluid-cloudnative/fluid?spm=a2c6h.12873639.0.0.402225d2609DW9) 是一个开源的 Kubernetes 原生的分布式数据集编排和加速引擎，主要服务于云原生场景下的数据... 展开更多
置顶
发表了博客
2021/02/01 10:56
摘要：为了解决磁盘存储空间限制的问题，提出分盘存储手段，从而实现备集群备份文件分散存储的目的。 1. 摘要 双集群容灾场景下，需要将主集群中的数据备份到备集群。然而，随着主集群数据量的增大，备集群不存在一个单独的大容量磁盘用于存放主集群发来的备份集，或存放备份集的盘符空间不足以存储主集群发来的所有备份文件。但是，容灾场景中仍然要能支持双集群的备份恢复。因此，为了解决磁盘存储空间限制的问题，提出分盘存... 展开更多
没有更多内容
加载失败，请刷新页面
