Hadoop 数据存储系统 Kudu

Hadoop 数据存储系统 Kudu

Apache
Java 查看源码»
跨平台
Apache
2016-02-26
MtrS

Apache Kudu 简介

为了应对先前发现的这些趋势,有两种不同的方式:持续更新现有的Hadoop工具或者重新设计开发一个新的组件。其目标是:

    对数据扫描(scan)和随机访问(random access)同时具有高性能,简化用户复杂的混合架构;
    高CPU效率,最大化先进处理器的效能;
    高IO性能,充分利用先进永久存储介质;
    支持数据的原地更新,避免额外的数据处理、数据移动

我们为了实现这些目标,首先在现有的开源项目上实现原型,但是最终我们得出结论:需要从架构层作出重大改变。而这些改变足以让我们重新开发一个全新的数据存储系统。于是3年前开始开发,直到如今我们终于可以分享多年来的努力成果:Kudu,一个新的数据存储系统。

的码云指数为
超过 的项目
加载中

评论(5)

一曦01
Kudu视频教程_Kudu分布式存储引擎教程 学习: pa去n.b文aidu.字co查m/s/1Uy看CQeg低qwx8o志7e3tLa-SVng 题去 马:ej6l
s
songsjuan
kudu是用于数据存储的,解决hbase的表关联、聚合效率慢的问题。不依赖Hdfs,更快速的所一些报表服务
糊涂_java
kudu中文字符乱码处理https://mp.weixin.qq.com/s?__biz=MzI4OTY3MTUyNg==&mid=2247484360&idx=1&sn=c4f1e91c73ca47de7f77e93b93495cf9&chksm=ec2ad3c1db5d5ad7c7f97b70006454e273bc191423505c20569f7bd5b52eef35646640c0ce1d#rd
Aorey
Aorey
这个和Hive有什么区别?
m
miketom155
怎么使用! #Kudu#

Apache Kudu 1.9.0 发布,支持位置感知

Apache Kudu 1.9.0 发布了,Kudu 是一个支持结构化数据的开源存储引擎,具有低延迟随机读取与高效分析读取模式。它基于 Apache Hadoop 生态系设计,并支持与 Apache 软件基金会其它数据分析项...

03/17 07:29

Apache Kudu 1.8.0 发布,Hadoop 生态数据存储系统

Hadoop 数据存储系统 Apache Kudu 1.8.0 已发布,该版本包含以下新特性: 引入了手动数据重新平衡工具,可用于在平板电脑服务器之间重新分配表副本 为 Kudu Python 客户端添加了对“IS NULL...

2018/10/27 07:24

Apache Kudu 1.7.0 发布,Hadoop 生态数据存储系统

Hadoop 数据存储系统 Apache Kudu 1.7.0 已发布,该版本包含以下新特性: Kudu 现在支持小数列类型(decimal column type)。 用于因服务器或磁盘故障而导致副本丢失的自动修复策略已得到改进...

2018/03/24 07:30

Apache Kudu 1.6.0 发布,新一代 Hadoop 生态数据存储系统

Hadoop数据存储系统Apache Kudu 1.6.0已发布,升级说明: 在Kudu 1.6.0中已经移除了对Spark 1(kudu-spark_2.10)的支持,现在只支持Spark 2版本。 在Kudu 1.5.0中,已经不再建议使用Spark 1...

2017/12/11 14:20

Apache Kudu 1.5.0 发布,Hadoop 数据存储系统

Hadoop数据存储系统Apache Kudu 1.5.0已发布,升级说明: 从Kudu 1.5.0开始支持Spark2.2,Spark 2.2是Kudu 1.5.0的默认依赖版本。虽然Spark 2.x对Java 7是兼容的,但是结合Kudu使用Spark 2.2...

2017/09/22 16:59

Apache Kudu 1.3.1 发布,Hadoop 存储系统

Apache Kudu 1.3.1 发布了。Apache Kudu 1.3.1是一个错误修复版本,它解决了Apache Kudu 1.3.0中发现的关键性问题。 特别是修复了在某些节点序列故障后可能误删数据的错误,更新内容如下: ...

2017/04/20 10:46

Apache Kudu 1.3.0 发布,Hadoop 存储系统

Apache Kudu 1.3.0 发布了。 Apache Kudu 1.3 是一个小版本更新,它在 Kudu 1.2 的基础上添加了各种新功能,改进,错误修复和优化。 值得关注的更新: 大大提高了对安全性的支持,包括 Kerb...

2017/03/24 07:04

Apache Kudu 1.2.0 发布,Hadoop 存储系统

Apache Kudu 1.2.0 发布了。 该版本主要更新内容如下: 用户数据(如行内容)现在已从日志语句中删除 Kudu 提供强一致性保证的能力大大改善 在元数据管理中的各种性能改进,在支持 AVX2 的主...

2017/01/21 07:51

Apache Kudu 1.1.0 发布,Hadoop 存储系统

Apache Kudu 1.1.0 发布了。 该版本主要更新内容如下: 改进 Python 客户端,支持"IN-list" 改进客户端超时可调性 为工作负载释放性能 提高服务器启动时间 提高 Raft 稳定性 详情请查看发布说...

2016/11/22 08:05

Apache Kudu 1.0.0 发布,Hadoop 存储系统

Apache Kudu 1.0.0 发布,该版本添加了一些新特性。部分更新内容如下: Removal of multiversion concurrency control (MVCC) history is now supported. This allows Kudu to reclaim disk ...

2016/09/21 07:13

没有更多内容

加载失败,请刷新页面

暂无问答

Kudu 1.7 安装指南

注:本安装指南使用rpm的方式安装kudu,因为在测试过程中,发现源码编译安装kudu后部分命令无法使用,故放弃这种方式。 环境: 操作系统:centos 6.6 kudu版本:kudu-1.7.0+cdh5.16.1 一、依...

2018/12/24 10:35
211
0
CDH版本kudu kudu-impala安装教程

安装CDH的kudu 第一步: 下载地址: http://archive.cloudera.com/kudu/csd/KUDU-5.10.0.jar csd文件夹 KUDU-5.10.2.jar 第二步: 下载地址: http://archive.cloudera.com/kudu/parcels/lat...

2018/01/16 10:42
610
0
Kudu Install in CDH5.10

Kudu作为CDH的又一个拳头产品,目前已经更新到1.2版本了,Kudu和CDH 5.10的配合已经可以在生产环境进行小批量测试了。 硬件限制: 1 一个或者多个kudu master,1,3,5 2 一个或者多个主机运行...

2017/03/09 08:19
32
0
Kudu vs HBase

Kudu vs HBase 网易云 已认证的官方帐号 9 人赞了该文章 本文由网易云 发布 背景 Cloudera在2016年发布了新型的分布式存储系统——kudu,kudu目前也是apache下面的开源项目。Hadoop生态圈中的...

2018/07/10 16:10
199
0
kudu 安装

kudu 安装

2016/06/08 16:51
686
0
如何在CDH中安装Kudu&Spark2&Kafka

1.概述 在CDH的默认安装包中,是不包含Kafka,Kudu和Spark2的,需要单独下载特定的Parcel包才能安装相应服务。本文档主要描述在离线环境下,在CentOS6.5操作系统上基于CDH5.12.1集群,使用C...

2018/09/04 14:54
97
0
KUDU 介绍

前言 近两年,KUDU 在大数据平台的应用越来越广泛。在阿里、小米、网易等公司的大数据架构中,KUDU 都有着不可替代的地位。本文通过分析 KUDU 的设计, 试图解释为什么 KUDU 会被广泛应用于大...

03/07 11:36
14
0

没有更多内容

加载失败,请刷新页面

返回顶部
顶部