大数据基准测试套件 Hibench

Apache-2.0
Java
跨平台
Intel
2019-12-23
诺墨

疫情之下,程序员如何转型?共享数字化转型加速度,就在微软在线技术峰会>>>

Hibench 是一个大数据基准测试套件,用来测试框架的速度、吞吐率与资源利用率等。

Hibench 包含一组 Hadoop、Spark 和流工作负载,包括 Sort、WordCount、TeraSort、Sleep、SQL、PageRank、Nutch 索引、Bayes、Kmeans、NWeight 与增强的 DFSIO 等。它还包含一些用于 Spark Streaming、Flink、Storm 与 Gearpump 的流工作负载。

的码云指数为
超过 的项目
加载中

评论(0)

暂无评论

暂无资讯

暂无问答

CDH集群安装&测试总结

0.绪论 之前完全没有接触过大数据相关的东西,都是书上啊,媒体上各种吹嘘啊,我对大数据,集群啊,分布式计算等等概念真是高山仰止,充满了仰望之情,觉得这些东西是这样的: 当我搭建的过程...

2016/10/24 09:35
943
0
大数据Benchmark

Benchmark在计算机领域应用最成功的就是性能测试,主要测试负载的执行时间、传输速度、吞吐量、资源占用率等。 数据库领域,TPC的Bench已经成为开发数据库的主流Benchmark。开发者在开发的过...

2016/10/06 21:56
2.4K
0
Spark in action on Kubernetes - 存储篇(一)

前言 在上篇文章中,我们分析了Spark Operator内部的机制,今天我们会讨论一个在大数据领域中最重要的话题 - 存储。大数据已经无声无息的融入了每个人的生活中。大到旅游买房,小到外卖打车,...

2019/04/19 11:21
3
0
史上最全的“大数据”学习资源(下)[转]

从网上转的 当前,整个互联网正在从IT时代向DT时代演进,大数据技术也正在助力企业和公众敲开DT世界大门。当今“大数据”一词的重点其实已经不仅在于数据规模的定义,它更代表着信息技术发展...

2016/05/04 17:27
1.2K
2
0013-如何在Kerberos与非Kerberos的CDH集群BDR不可用时复制数据

1.概述 本文档描述了在Kerberos与非Kerberos的CDH集群之间BDR不可用的情况下实现数据互导。文档主要讲述 1.测试集群环境描述 2.CDH的BDR功能验证 3.集群之间数据复制要求和限制 4.集群之间数...

2018/11/17 21:00
353
0

没有更多内容

加载失败,请刷新页面

没有更多内容

返回顶部
顶部