Spark 1.2.1 发布,开源集群计算系统

oschina
 oschina
发布于 2015年02月11日
收藏 25

Spark 1.2.1 发布,此版本是个维护版本,包括 69 位贡献者,修复了一些 Spark 的 bug,包括核心 API,Streaming,PySpark,SQL,GraphX 和 MLlib 方面的。更多改进内容请看发行说明,此版本现已提供 下载

Spark 是一种与 Hadoop 相似的开源集群计算环境,但是两者之间还存在一些不同之处,这些有用的不同之处使 Spark 在某些工作负载方面表现得更加优越,换句话说,Spark 启用了内存分布数据集,除了能够提供交互式查询外,它还可以优化迭代工作负载。

Spark 是在 Scala 语言中实现的,它将 Scala 用作其应用程序框架。与 Hadoop 不同,Spark 和 Scala 能够紧密集成,其中的 Scala 可以像操作本地集合对象一样轻松地操作分布式数据集。

尽管创建 Spark 是为了支持分布式数据集上的迭代作业,但是实际上它是对 Hadoop 的补充,可以在 Hadoo 文件系统中并行运行。通过名为 Mesos 的第三方集群框架可以支持此行为。Spark 由加州大学伯克利分校 AMP 实验室 (Algorithms, Machines, and People Lab) 开发,可用来构建大型的、低延迟的数据分析应用程序。

本站文章除注明转载外,均为本站原创或编译。欢迎任何形式的转载,但请务必注明出处,尊重他人劳动共创开源社区。
转载请注明:文章转载自 OSCHINA 社区 [http://www.oschina.net]
本文标题:Spark 1.2.1 发布,开源集群计算系统
加载中

最新评论(13

Minho
Minho

引用来自“sunuvw”的评论

你不知道 内存 涨了多少倍么,回家吃白菜去吧
对于小公司来说,涨了一块钱就已经很多了,对于大公司来说,只能说寥寥。
Minho
Minho

引用来自“Minho”的评论

内存现在是白菜价!

引用来自“sunuvw”的评论

你家白菜这个价???

引用来自“Minho”的评论

只能说你家吃不起白菜!

引用来自“sunuvw”的评论

你就不怕 咽不下去 撑死?
这个你放心,既然需要用Spark处理大数据,几个PB的内存还是能用得起的。
sunuvw
sunuvw

引用来自“Minho”的评论

内存现在是白菜价!

引用来自“sunuvw”的评论

你家白菜这个价???

引用来自“Minho”的评论

只能说你家吃不起白菜!
你就不怕 咽不下去 撑死?
sunuvw
sunuvw
你不知道 内存 涨了多少倍么,回家吃白菜去吧
Minho
Minho

引用来自“Minho”的评论

内存现在是白菜价!

引用来自“sunuvw”的评论

你家白菜这个价???
只能说你家吃不起白菜!
_小小的等待
_小小的等待
不开通会员不给安装软件,不开X砖不给打电话,还有,这是我们尊贵的root用户,拥有root权限…
狂暴的大螃蟹
狂暴的大螃蟹

引用来自“会飞的螃蟹”的评论

去哪找大内存有便宜的主机

引用来自“独孤青冥”的评论

买个主机然后自己加内存。
自备主机 托管 算是目前最划算的方式了,上到一定量 云 实在是用不起
kidbei
kidbei

引用来自“Minho”的评论

内存现在是白菜价!
好贵的白菜...
sunuvw
sunuvw

引用来自“Minho”的评论

内存现在是白菜价!
你家白菜这个价???
返回顶部
顶部