Apache Hadoop 3.1.0 发布,原生支持 GPU 和 FPGA

来源: 投稿
作者: 李玉珏
2018-04-13

Apache Hadoop 3.1.0 正式发布了,Apache Hadoop 3.1.0 是2018年 Hadoop-3.x 系列的第一个小版本,并且带来了许多增强功能。不过需要注意的是,这个版本并不推荐在生产环境下使用,如果需要在正式环境下使用,请等待 3.1.1 或 3.1.2 版本。

这个版本的 Hadoop 带来了许多重大的变化,如下:

  • YARN 原生支持 GPU(详见 YARN-6223)

  • YARN 原生支持 FPGA(详见 YARN-5983)

  • 支持原生的 YARN 服务(详见 YARN-5079 / YARN-4793 / YARN-4757 / YARN-6419)

  • YARN 新的调度放置策略

  • 支持 docker container

  • 容量调度(Capacity Scheduler):支持在执行队列映射时自动创建叶队列(详见 YARN-7117)

  • 允许将存储在 HDFS 之外的数据映射到 HDFS 并从 HDFS 进行寻址。

更多的详情请参见官方 Release Notes

展开阅读全文
5 收藏
分享
加载中
精彩评论
原生支持gpu
2018-04-13 12:12
2
举报
最新评论 (6)
显卡厂商笑出了声
2018-04-13 17:49
0
回复
举报

引用来自“Ryan-瑞恩”的评论

RDMA 啥时候能支持。。。
😆
2018-04-13 14:35
0
回复
举报
RDMA 啥时候能支持。。。
2018-04-13 13:10
0
回复
举报
原生支持gpu
2018-04-13 12:12
2
回复
举报
FPGA 要碉堡了
2018-04-13 11:57
0
回复
举报
我的天呐 , 不推荐生产环境. 还正儿八经的发个 release
2018-04-13 11:32
0
回复
举报
更多评论
6 评论
5 收藏
分享
返回顶部
顶部