腾讯 Angel 1.0 正式版发布,机器学习高性能计算平台
两味真火 2017年06月17日

腾讯 Angel 1.0 正式版发布,机器学习高性能计算平台

两味真火 两味真火 发布于2017年06月17日 收藏 54 评论 13

【腾讯云】云上实验室:开发者零门槛,免费使用真机在线实验!>>>  

在去年 12 月 18 日的腾讯大数据技术峰会暨 KDD China 技术峰会上,腾讯大数据宣布推出了面向机器学习的「第三代高性能计算平台」——Angel,并表示将于 2017 年开放其源代码。现在,2017 年已经大约过去了一半, Angel 1.0 正式版发布了。

Angel 1.0.0 新特性:

1.ParameterServer 功能

  •  基于 Matrix/Vector 的模型自动切分和管理,兼顾稀疏和稠密两种格式

  •  支持对 Model 进行 Push 和 Pull 操作,可以自定义复杂的 psFunc

  •  提供多种同步控制机制(BSP/SSP/ASP)

2. 开发运行

  •  语言支持:系统基于 Scala 和 Java 开发,用户也可以自由选择

  •  部署方便:可以直接在 Yarn 社区版本中运行,也支持本地调试模式

  •  数据切分: 自动切分读取训练数据,默认兼容了 Hadoop FS 接口

  •  增量训练:训练过程中会自动 Checkpoint,而且支持加载模型后,增量训练

3.PS Service

  •  只启动 PSServer 和 PSAngent,为其他分布式计算平台提供 PS 服务

  •  基于 PS-Service,不需要修改 Spark 核心代码,直接开发 Spark-on-Angel 算法,该模式无缝支持 Breeze 数值运算库

4. 算法库

  •  集成 Logistic Regression,SVM,KMeans,LDA,MF,GBDT 等机器学习算法

  •  多种优化方法,包括 ADMM,OWLQN,LBFGS 和 GD

  •  支持多种损失函数、评估指标,包含 L1、L2 正则项

5. 算法优化

  •  LDA 采用了 F+LDA 算法用于加速采样的速度,同时利用流式参数获取的方法减少网络参数获取的延迟

  •  GBDT 使用两阶段树分裂算法,将部分计算转移到 PS,减少网络传输,提升速度

下载地址:

>>>【评论有礼】6月6日-30日评论每日更新的“新闻资讯和软件更新资讯”,评论点赞数超过 20 的可登上每周更新的“源资讯”和“软件周刊”两大栏目,点赞数超过 50 的还将获得 5 活跃积分奖励和开源中国定制好礼。详情

本站文章除注明转载外,均为本站原创或编译。欢迎任何形式的转载,但请务必注明出处,尊重他人劳动共创开源社区。
转载请注明:文章转载自 开源中国社区 [http://www.oschina.net]
本文标题:腾讯 Angel 1.0 正式版发布,机器学习高性能计算平台
分享
评论(13)
精彩评论
1

引用来自“shitalpig”的评论

我选择谷歌,不选国内的垃圾
不就是腾讯招聘你被刷下来了嘛~ 至于吗?
最新评论
0

引用来自“shitalpig”的评论

我选择谷歌,不选国内的垃圾

引用来自“久永”的评论

不就是腾讯招聘你被刷下来了嘛~ 至于吗?

引用来自“shitalpig”的评论

呵呵呵
回复@shitalpig : 纯属玩笑!中肯的说,腾讯一般般,态度是不吹不黑!
0
表示看不懂,看来我还是太菜了
0

引用来自“shitalpig”的评论

我选择谷歌,不选国内的垃圾

引用来自“久永”的评论

不就是腾讯招聘你被刷下来了嘛~ 至于吗?
呵呵呵
0
1
1

引用来自“shitalpig”的评论

我选择谷歌,不选国内的垃圾
不就是腾讯招聘你被刷下来了嘛~ 至于吗?
0
分布式,不就是坑钱嘛
0
我选择谷歌,不选国内的垃圾
0
跟腾讯云 绑定吗?
0
不好用
0
区块链
0

引用来自“漆黑的烈焰使”的评论

机器学习主要用在哪?
数据分析,垃圾邮件识别,新闻分类,金融反欺诈,等等等等
0
英吹斯汀
0
机器学习主要用在哪?

相关资讯

最新资讯
热门资讯
顶部