数据仓库平台 Hive

数据仓库平台 Hive

Apache
Java
跨平台
Apache
2008-10-27

Hive是一个基于Hadoop的数据仓库平台。通过hive,我们可以方便地进行ETL的工作。hive定义了一个类似于SQL的查询语言:HQL,能 够将用户编写的QL转化为相应的Mapreduce程序基于Hadoop执行。

Hive是Facebook 2008年8月刚开源的一个数据仓库框架,其系统目标与 Pig 有相似之处,但它有一些Pig目前还不支持的机制,比如:更丰富的类型系统、更类似SQL的查询语言、Table/Partition元数据的持久化等。

加载中

评论(4)

foreverglow
foreverglow
好用的很
ajavaloser
ajavaloser
hive首页是不是应该改到hive.apache.org了,@红薯 Hive
o
olive
hive里的hcatalog是怎么使的? Hive
皮总
皮总
@红薯 #Hive# 有啥好用的客户端啊, 最好能有 SQLyog这种水准的

Apache Hive 3.1.1 发布,数据仓库平台

Apache Hive 3.1.1 已发布,更新如下: Bug [HIVE-18767] - Some alterPartitions invocations throw 'NumberFormatException: null' [HIVE-18778] - Needs to capture input/output entitie...

2018/11/03 07:29

Apache Hive 2.3.1 发布,数据仓库平台

Apache Hive 2.3.1 已发布,更新如下: [HIVE-17514]- 使用 SHA-256 作为 cookie signer 来提高安全性 [HIVE-17562] - ACID 1.0 + ETL 策略应将空的压缩文件视为未覆盖之地 [HIVE-17664] - 重...

2017/10/26 07:56

Apache Hive 2.3.0 发布,数据仓库平台

Apache Hive 2.3.0 已发布,本次更新带来了新特性、改进,以及 bug 的修复等。详细内容点此参阅。 Hive 是一个基于 Hadoop 的数据仓库平台。通过 Hive,我们可以方便地进行 ETL 的工作。Hiv...

2017/07/20 07:30

Apache Hive 2.1.1 发布,数据仓库平台

数据仓库平台 Apache Hive 2.1.1 发布了。本次部分更新如下: Sub-task [HIVE-13409] - Fix JDK8 test failures related to COLUMN_STATS_ACCURATE [HIVE-13549] - Remove jdk version spec...

2016/12/09 07:56

Apache Hive 走向内存计算,性能提升26倍

Apache Hive 2.1已于几个月前发布,它引入了内存计算,这使得Hive计算性能得到极大提升,这将会影响SQL On Hadoop目前的竞争局面。据测试,其性能提高约26倍。 Apache Hive 2.1新引入了6大性...

2016/11/01 08:40

Apache Hive 2.1.0 发布,数据仓库平台

Apache Hive 2.1.0 发布了,完整改进记录如下: Sub-task [HIVE-9774] - Print yarn application id to console [Spark Branch] [HIVE-10280] - LLAP: Handle errors while sending source s...

2016/06/21 21:14

Apache Hive 2.0.1 发布,数据仓库平台

Apache Hive 2.0.1 发布,完整改进记录如下: Release Notes - Hive - Version 2.0.1 ** Sub-task * [HIVE-13362] - Commit binary file required for HIVE-13361 ** Bug * [HIVE-9499] - hi...

2016/05/27 14:41

Apache Hive 2.0.0 发布,数据仓库平台

Apache Hive 2.0.0 发布,完整改进记录如下: Release Notes - Hive - Version 2.0.0 Sub-task [HIVE-8858] - Visualize generated Spark plan [Spark Branch] [HIVE-9139] - Clean up GenSp...

2016/02/17 06:43

Apache Hive 1.2.1 发布,数据库仓库平台

Apache Hive 1.2.1 发布,此版本主要改进内容如下: 改进 [HIVE-8769] - Physical optimizer : Incorrect CE results in a shuffle join instead of a Map join (PK/FK pattern not detecte...

2015/06/29 14:14

Apache Hive 1.0.1/1.1.1 发布,数据仓库平台

Apache Hive 1.0.1/1.1.1 发布,两个版本都修复了一个有关 LDAP 身份验证提供者实施漏洞的问题,并且两个版本都改善了 Hive 的连接服务。 两个版本具体更新信息如下: Apache Hive 1.0.1 发行...

2015/05/23 07:48

没有更多内容

加载失败,请刷新页面

38
回答
程序员的出路在哪里?七年半老程序员的一点心得

我是南方人,大专,软件技术专业,2011年底出来实习做前端。实习大家都懂的,薪资低任务重,做了大半年,到2012年拿了毕业证就离职了。说实话当时的技术也菜...

06/28 22:08
2
回答
1
回答
用户画像存储方案

1.用户数千万级 2.标签最高支持上万 3.标签会逐渐增多 4.支持依据多个标签进行查询,统计数量(秒级响应)(这是重点) 用什么存储能实现? Hbase...

05/08 11:21
2
回答
每天几十万hive任务,瓶颈在hive元数据db上,有什么成熟解决方案

用的主备mysql,目前mysql高峰期一直冲高,有什么成熟的db解决方案

04/15 20:41
5
回答
Hive sql解析出对应的表名和列名
915753328 的回答 2015/12/10 09:36
最佳答案
参考文章:http://www.cnblogs.com/drawwindows/p/4595771.html
6
回答
请教南京的小伙伴:java开发或者大数据开发环境怎么样

请教南京的小伙伴:java开发或者大数据开发环境怎么样(薪资、福利等)?有哪些好公司可以考虑?12年2月至今一直在深圳,前3年纯java,后4年java和...

02/12 10:03
3
回答
您好,Hive大数据导入Hbase,二进制数据类型如何导入

@王二铁 你好,想跟你请教个问题: 现在使用Hive生成HFile的方式导入Hbase, 数据类型为Int,Long等数据无法转成相应的Bytes存入Hb...

2018/12/23 12:23
1
回答
hive 或者 presto 有没有类似于mybatis 能把表给结构化 并把sql语句提取出来的框架
长相思面 的回答 2018/12/03 16:00
最佳答案
已经解决了,直接在mybatis里面配置hive 表结构的bean;dao;mapping 然后给mybatis写了一个拦截器, 在mybatis执行查询操作前进行拦截,查mysql的和查hive的Dao 放在不同的package下面 拦截后可以获取最终的sql语句与该sql的对应Dao路径,...
1
回答
基于hive建设数据仓库的问题?

想建设一个数据仓库,查阅了很多数仓建设方案,现在分层方案已经有了,具体物理上基于hive如何构建还是比较迷惑。主要疑问这几点: 1、在hive中建立多个库...

2018/11/30 09:06

没有更多内容

加载失败,请刷新页面

搭建hive环境(一)

一、与 Hadoop 类似,Hive 也有 3 种运行模式: 内嵌模式: 将元数据保存在本地内嵌的 Derby 数据库中,这是使用 Hive 最简单的方式。但是这种方式缺点也比较明显,因为一个内嵌的 Derby 数据...

2018/03/14 23:41
119
0
安装配置hive

安装配置hive

2015/12/14 21:11
152
0
hive安装

[toc] ##安装环境 hadoop-2.6.0 hive-1.2.1 mysql作为元数据库 ##ubutun快速安装mysql - sudo apt-get install mysql-server - sudo apt-get install mysql-client 如果无法下载,先执行sud...

2015/11/10 10:18
28
0
手动搭建hive

Hive本文主要介绍在之前搭建的集群基础上安装的详细过程。 实验环境 hive版本:apache-hive-2.3.0-bin.tar.gz hadoop: hadoop-2.7.3(请提前安装) 安装hive 上传hive文件到/hasoft 解压命令:...

2018/04/16 14:50
21
0
hive-0.12安装详解

QQ群:248087140 座右铭: 你在你擅长的领域牛逼, 并带着一群小白变牛逼, 别人会发自内心的去尊重你的。 --请点击加入我们

2014/07/05 13:59
81
0
hive-0.12安装详解

群号:214293307

2014/01/13 19:13
3.6K
1
Hive1.2安装

Hive1.2安装

2016/05/31 18:37
56
0
hive从0.12.0升级到1.2.1步骤详解及填坑

hive升级 hive-1.2.1 PART_COL_STATS

2016/06/03 10:49
585
0
hive on spark 编译

前置条件说明 Hive on Spark是Hive跑在Spark上,用的是Spark执行引擎,而不是MapReduce,和Hive on Tez的道理一样。 从Hive 1.1版本开始,Hive on Spark已经成为Hive代码的一部分了,并且在s...

2015/09/25 13:23
719
0
hive配置项

hive 比较全面的配置项

2016/06/03 20:31
30
0

没有更多内容

加载失败,请刷新页面

返回顶部
顶部