【重磅发布】Linkis 0.10.0 版本发布

来源: 投稿
作者: 微众开源
2020-12-03

大家期待的Linkis on kubernetes的容器化解决方案来啦!

Linkis 0.10.0是在微众银行的倾力帮助下,由艾佳生活主导完成的一个重要版本。

这是基于Linkis 0.9.4的下一个发行版本。 Linkis docker镜像会作为制成品发布,可以节省大家编译、排包和适配新环境的大量时间,基于cgroup隔离可以保证每个Linkis微服务不会由于超卖而影响其他Linkis微服务,做到cpu,mem,io,disk的隔离,让Linkis的每个微服务持续稳定提供服务。

k8s提供的滚动发布,弹性伸缩,故障迁移能力,让Linkis做到高SLA,满足业务7*24使用的要求,为大家的大数据平台提供金融级可靠能力。

Linkis on K8S镜像管理

Linkis on K8S 部署方案

特性增强

1.  linkis on kubernetes 特性。

2.  kubernetes configmap 作为配置中心特性。

3.  使用 ingress-nginx 把nginx 放入kubernetes集群内。

4.  使用 fluentd-es 采集 micro-service日志。

5.  前端静态文件放入k8s集群内。

6.  适配k8s 网络模型,注册 pod ip 到注册中心用作服务发现。

7.  使用环境变量传递 eurekaURL,jvm params。

8.  去除各微服务对cloudmodule的隐式依赖。

9.  静态路由+ip 地址伪装,解决spark executor 到 spark-engine的通信问题。

Bug修复

1. 修复bml文件名重复的缺陷。

新贡献者

Linkis 0.10.0 的发布,离不开WeDataSphere社区的贡献者,他们无私地贡献自己的代码,积极地与社区伙伴进行技术交流,有了他们的助力,Linkis 0.10.0才能顺利地发布,在此感谢各位社区的贡献者! 排名不分先后:

brianzhangrong: 作为主持者,贡献了linkis on kubernetes的整个方案。

irusist: bml stored filename bug定位

chongchuanbing: 移除对cloud-module的隐式依赖

lidongzhangg: linkis.properties配置移到configmap,使用configmap作为配置中心

hds1999: 使用环境变量传递eurekaUrl,jvm 参数到docker

Linkis 0.10.0是Linkis容器化的一个关键版本,该版本一经商讨和规划,就获得了WeDataSphere开源社区的强烈关注,社区对艾佳生活大数据团队的倾情参与和无私贡献致谢,并对Linkis 0.10.0的版本质量给予了高度的认可。

WeDataSphere社区与艾佳生活大数据团队进行了多次线上沟通,深入交流了Linkis的总体架构、技术理念和合作共建规划,社区对艾佳生活大数据团队架构师brianzhangrong(社区ID:brian-rongzhang)的倾情参与及贡献致谢,并给予其高度的评价及认可。

关于艾佳生活大数据团队

艾佳生活创立于2015年初,由江苏一德集团和建业集团共同投资组成,开创互联网生态、共享经济、地产3.0三位一体的新模式。公司致力于打造互联网家具生态圈,对地产、家装、家具、家电、智能化、设计、金融、物流进行价值链重构,实现多方共赢,艾佳生活获得天图资本10亿元B轮融资,估计超10亿美金,在资本寒冬环境下成为新晋独角兽。

展望未来

未来,微众银行WeDataSphere大数据团队将继续携手艾佳生活大数据团队,在容器化方向深耕细作。一方面推动Linkis与KubeSphere集成,在易用性、弹性伸缩、故障迁移和滚动发布等能力上推出更多的容器化特性,丰富Linkis在云原生方向的应用场景;另一方面,将更加深入地使用和集成云原生各个组件的容器化能力,如:将EngineConn的启动停止交由service管理、引入nacos接管服务注册发现、更加灵活细粒度的pod结构,协助满足Entrance与EngineConn的点对点RPC通信需要,以满足企业对大数据统一出入口的计算治理需求,做到7*24不间断提供服务,为大家的大数据平台提供金融级可靠能力。

Linkis 开源项目地址如下,欢迎大家提交 issue 及 star:

展开阅读全文
6 收藏
分享
加载中
最新评论 (2)
微众开源深圳前海微众银行股份有限公司
欢迎大家使用、star和参与社区交流。
2020-12-04 17:20
0
回复
举报
点赞点赞
2020-12-03 21:31
0
回复
举报
更多评论
2 评论
6 收藏
分享
返回顶部
顶部