精彩博客

数据湖有新解!Apache Hudi 与 Apache Flink 集成

简介: 纵观大数据领域成熟、活跃、有生命力的框架,无一不是设计优雅,能与其他框架相互融合,彼此借力,各专所长。 作者:王祥虎(Apache Hudi 社区) Apache Hudi 是由 Uber 开发并开源的...

前天 11:00
3.9K
1
小熊派开发实践丨漫谈LiteOS之传感器移植

摘要:本文基于小熊派开发板简单介绍了如何在LiteOS中移植传感器,从而实现对于传感器的相关控制。 1 hello world 相信大家无论在学习编程语言开始的第一个函数应该是HelloWorld,本文将从h...

10/22 17:03
4.3K
1
在 Istio 中实现 Redis 集群的数据分片、读写分离和流量镜像

Redis 是一个高性能的 key-value 存储系统,被广泛用于微服务架构中。如果我们想要使用 Redis 集群模式提供的高级特性,则需要对客户端代码进行改动,这带来了应用升级和维护的一些困难。利用...

10/22 10:16
3.1K
1
应用架构之道:分离业务逻辑和技术细节

架构 什么是架构? 关于架构这个概念很难给出一个明确的定义,也没有一个标准的定义。 硬是要给一个概述,我认为架构就是对系统中的实体以及实体之间的关系所进行的抽象描述。 架构始于建筑,...

10/22 10:11
3.9K
2
看动画学算法之:linkedList

简介 linkedList应该是一种非常非常简单的数据结构了。节点一个一个的连接起来,就成了linkedList。今天我们使用动画的方法一起来看看linkedList是怎么插入和删除的。 linkedList的构建 link...

10/21 10:53
2.8K
1
详解GaussDB(DWS) explain分布式执行计划

摘要:本文主要介绍如何详细解读GaussDB(DWS)产生的分布式执行计划,从计划中发现性能调优点。 前言 执行计划(又称解释计划)是数据库执行SQL语句的具体步骤,例如通过索引还是全表扫描访问表...

10/20 15:59
1.8K
1
openEuler 首个创新版本:集全球开发者之力,共构开放多元的软件生态体系

华为“2012实验室”是一个颇具神秘色彩的部门,它专注于研究新理论和基础软件研发,许多前沿的新技术均诞生于此,因此有媒体曾将其称为“中国黑科技最多的地方”。 “2012实验室”部门包含许...

10/19 18:40
4.1K
0
java安全编码指南之:死锁dead lock

简介 java中为了保证共享数据的安全性,我们引入了锁的机制。有了锁就有可能产生死锁。 死锁的原因就是多个线程锁住了对方所需要的资源,然后现有的资源又没有释放,从而导致循环等待的情况。...

10/16 11:04
3.7K
1
权威指南:Serverless 未来十年发展解读 — 伯克利分校实验室分享(上)

编者按 本文整理自 Johann Schleier-Smith 在 ServerlessDays China 的演讲,是来自加州大学伯克利分校计算机科学 Riselab 团队的研究成果。 ServerlessDays 是由全球 Serverless 开发者发起...

10/15 17:21
375
0
java安全编码指南之:异常处理

异常简介 先上个图,看一下常见的几个异常类型。 所有的异常都来自于Throwable。Throwable有两个子类,Error和Exception。 Error通常表示的是严重错误,这些错误是不建议被catch的。 注意这里...

10/14 10:48
2.9K
2
转录组RNA-Seq使用docker+bioconda搭建分析环境

转录组RNA-Seq使用docker+bioconda搭建分析环境 前言 近期学习转录组分析,从ncbi下载数据,转成fastq,STAR/hisat2 map到基因组上,使用featureCount拿到表达矩阵文件挺顺利的,就是到了下游...

10/13 15:40
1.2K
1
如何提升微服务的幸福感?

作者 | 亦盏 前言 随着微服务的流行,越来越多公司使用了微服务框架,微服务以其高内聚、低耦合等特性,提供了更好的容错性,也更适应业务的快速迭代,为开发人员带来了很多的便利性。但是随...

10/13 14:15
3K
0
MaxCompute full outer join改写left anti join实践

简介: ods层数据同步时经常会遇到增全量合并的模型,即T-1天增量表 + T-2全量表 = T-1全量表。可以通过full outer join脚本来完成合并,但是数据量很大时非常消耗资源。本文将为您介绍在做增...

10/13 13:42
1.2K
1
来喽,来喽,Python 3.9正式版发布了~~~

摘要:2020年10月5日,在全国人员欢度国庆节和中秋节时,Python 3.9 悄摸摸地正式发布了。 2020年10月5日,在全国人员欢度国庆节和中秋节时,Python 3.9 悄摸摸地正式发布了。我们来一起来看...

10/12 16:25
5.7K
0
架构制图:工具与方法论

前言 “架构制图”这词乍一听似乎有些晦涩,但如果提起“工程制图”,相信绝大部分工科背景的程序员们都不会陌生,甚至还能共同感慨下那些年一起伏在宿舍左手圆规,右手直尺,徒手作图到深夜...

10/09 17:43
1.2W
12
Dubbo 3.0 前瞻:重塑 Spring Cloud 服务治理

作者 | 小马哥 **导读:**Dubbo 社区策划了【Dubbo 云原生之路】系列文章,和大家一起回顾 Apache Dubbo 产品和社区的发展,并展望未来发展。系列文章主要涵盖 Dubbo 技术解读、社区运营、应...

10/09 15:18
1W
3
Istio 运维实战系列(3):让人头大的『无头服务』-下

本系列文章将介绍用户从 Spring Cloud,Dubbo 等传统微服务框架迁移到 Istio 服务网格时的一些经验,以及在使用 Istio 过程中可能遇到的一些常见问题的解决方法。 失败的 Eureka 心跳通知 在...

09/29 17:58
395
0
架构制图:工具与方法论

作者 | 楚衡 前言 “架构制图”这词乍一听似乎有些晦涩,但如果提起“工程制图”,相信绝大部分工科背景的程序员们都不会陌生,甚至还能共同感慨下那些年一起伏在宿舍左手圆规,右手直尺,徒...

09/28 15:10
969
1
Flink SQL 1.11 新功能与最佳实践

本文整理自 Apache Flink PMC,阿里巴巴技术专家伍翀(云邪)的分享,旨在帮助用户快速了解新版本 Table & SQL 在 Connectivity 和 Simplicity 等方面的优化及实际开发使用的最佳实践,主要分...

09/28 11:33
2.8K
0
手把手教你在 TKE 集群中实现简单的蓝绿发布和灰度发布

概述 如何在腾讯云 Kubernetes 集群实现蓝绿发布和灰度发布?通常要向集群额外部署其它开源工具来实现,比如 Nginx Ingress,Traefik 等,或者让业务上 Service Mesh(服务网格),利用服务网...

09/25 18:00
396
0

没有更多内容

加载失败,请刷新页面

云原生时代,你应该了解的Service Mesh

导读:本文系 Service Mesh 系列文章的第一篇,一步步带读者了解 Service Mesh 的基础概念和前世今生。 后续还将会为读者带来系列 Service Mesh 文章,内容涵盖 Istio 入门体验、Istio 和 En...

09/17 12:03
2.2W
6
基于码云 Gitee 的云原生持续集成工作流

本文介绍一种基于码云的持续集成工作流及其实现,读者可以通过阅读本文,从 0 实现一个生产级以 Gitee 仓库为核心的云原生持续集成工作流。 在日常开发过程中,通常会有多个业务或功能模块同...

08/03 15:40
1.6W
5
微服务开源框架TARS的RPC源码解析 之 初识TARS C++服务端

作者:Cony 导语:微服务开源框架TARS的RPC调用包含客户端与服务端,《微服务开源框架TARS的RPC源码解析》系列文章将从初识客户端、客户端的同步及异步调用、初识服务端、服务端的工作流程四...

07/16 16:51
1.2W
0
如何将 Web 框架迁移到 Serverless

Serverless 通常翻译为「无服务架构」,是一种软件系统设计架构思想和方法,并不是一个开发框架或者工具。他的出现是为了让开发者更加关注业务的开发,而将繁杂的运维和部署交给云厂商。Ser...

07/10 15:35
2.1W
1
边缘计算与云原生结合加速发展

随着企业和政府建立自己的新常态,5G和边缘计算对于提供许多行业(包括制造业,医疗保健,能源和公用事业等)所需的自动化,性能和认知洞察力必不可少。 - Forbes 一、边缘计算的发展趋势 全...

07/09 17:04
1.3W
3
如何画好一张架构图?(内含知识图谱)

作者 | 箫逸 阿里文娱高级技术专家 关注“阿里巴巴云原生”公众号,回复 架构 即可查看清晰知识大图! **导读:**架构图是什么?为什么要画架构图?如何画好架构图?有哪些方法?本文从架构的...

06/16 13:26
5.4W
29
更新应用时,如何实现 K8s 零中断滚动更新?

作者 | 子白(阿里云开发工程师)、溪恒(阿里云技术专家) 《深入浅出 Kubernetes》一书共汇集 12 篇技术文章,帮助你一次搞懂 6 个核心原理,吃透基础理...

06/03 13:25
1.6W
1
CNCF 官方大使张磊:Kubernetes 是一个“数据库”吗?

作者 | 张磊,阿里云高级技术专家、CNCF 官方大使,CNCF 应用交付领域 co-chair,Kubernetes 项目资深维护者 最近,Kubernetes 社区里有一个关于“Kubernetes is the new database”的论述,...

05/21 17:28
2.8W
4
一文搞懂蓝绿部署和金丝雀发布

本文来自Rancher Labs 在之前关于CI/CD的文章中,我们简单讨论了蓝绿部署和金丝雀发布以及它们在持续交付中所扮演的角色。这些都是十分有效的方法,能够大大降低与应用程序部署相关的风险。所...

04/23 20:37
3.5W
3
深入理解CI/CD:工具、方法、环境、基础架构的全面指南

本文来自Rancher Labs 持续集成和持续交付(CI/CD)是DevOps背后的助推力之一。如果你的企业正在考虑使用DevOps,那么CI/CD绝对是需要考虑的其中一部分。但是CI/CD到底意味着什么?为什么它如...

04/16 19:40
2.8W
1
开源 | 爱奇艺网络流量分析引擎QNSM及其应用

导读 一定业务规模的互联网公司的基础设施的网络边界通常都呈现一定程度的复杂多分区的情况,如何进行有效的安全防护和控制会成为安全体系建设的重点和难点。面对这一挑战,爱奇艺安全团队自...

03/19 11:55
2.3W
5
略谈分布式系统中的容器设计模式

略谈分布式系统中的容器设计模式 谭中意 前言:云原生(Cloud Native)不仅仅是趋势,更是现在进行时,它是构建现代的,可弹性伸缩的,快速迭代的计算网络服务的事实标准。其中容器编排系统K...

03/11 11:10
1.3W
3
Serverless 的运行原理与组件架构

本文重点探讨下开发者使用 Serverless 时经常遇到的一些问题,以及如何解决 过去一年,我们和大量 Serverless 用户进行了线上和线下的交流,了解大家的业务场景、对 Serverless 的看法和使用...

02/09 20:10
2W
2
2020 年 Service Mesh 技术展望

背景 有外文指出,2020 年 Service Mesh 技术将有以下三大发展: 快速增长的服务网格需求; Istio 很难被打败,很可能成为服务网格技术的事实标准; 出现更多的服务网格用例,WebAssembly 将...

02/04 17:44
8.3K
0
Service Mesh在百度网盘数万后端的实践落地

1 背景 起初,在网盘快速发展期,为了快速上线,采用了服务单体化 + 主干开发模式进行研发,随着用户规模爆发式的增长以及产品形态的丰富,单体化的不足就体现出来了,于是架构上采用了微服务...

01/22 11:19
2.8W
6
阿里云上万个 Kubernetes 集群大规模管理实践

作者 | 汤志敏,阿里云容器服务高级技术专家 在 2019 年 双11 中,容器服务 ACK 支撑了阿里巴巴内部核心系统容器化和阿里云的云产品本身,也将阿里巴巴多年的大规模容器技术以产品化的能力输...

01/20 22:06
4W
1
分布式事务——两阶段提交

在分布式系统中,为了保证数据的高可用,通常会将数据保留多个副本(replica), 这些副本会放置在不同的节点上。这些数据节点可能是物理机器,也可能是虚拟机。为了对用户提供正确的CURD等语...

2019/12/11 20:00
1.2W
8
在存储世界中成为“云原生”的真正含义

“云原生”(Cloud Native)一词在 2019 年被技术界广泛使用,但是却没有关于这个词一个特别明确的定义。主要的困惑在于,“云原生”与您的应用程序部署到的环境几乎没有关系,该术语同样适用于...

2019/11/11 19:33
9.7K
5
全方位详解Service Mesh(服务网格)

Service mesh是近几年才出现的一个新兴概念。它可以解决微服务之间通信愈发复杂的问题。那么什么是Service mesh?它有什么具体的功能?它的架构又是如何的呢?它与Kubernetes的关系是怎样的?...

2019/09/12 10:29
5.6K
3
记一次构建SaaS平台项目失败后的反思

记一次构建SaaS平台项目失败后的反思 前言: 笔者从2017年起开始着手将公司现有的软件系统改造成多租户模式,以降低整个系统的运营成本。但最后这个项目以失败告终。今天,我将对这个SaaS项目...

2019/07/15 21:11
1W
16

没有更多内容

加载失败,请刷新页面

重磅 | 阿里开源首个 Serverless 开发者平台 Serverless Devs

Serverless 从概念提出到应用,已经走过了 8 个年头,开发者对 Serverless 的使用热情不断高涨。为帮助开发者实现一键体验多云产品,极速部署 Serverless 项目,10 月 23 日,阿里巴巴正式宣...

前天 18:20
20
0
独家下载!Java工程师成神必备宝典

初学Java的你还在烦恼不知道怎么去学,学习什么内容吗?那么多的技术书籍是否已经让你无从下手?别急,这就附上一份完整的Java学习路径。从头开始,给你一个体系化的学习方案。结合作者多年开...

前天 16:32
23
0
阿里云网站全新启航,重新定义2.0时代的“一站式上云”

在刚刚过去的2020年云栖大会上,阿里云智能总裁张建锋宣布,阿里云正式从“飞天云平台”走向“数字原生操作系统”,进入2.0时代。 关于阿里云2.0,张建锋如此定义:“阿里云2.0,我认为就是云...

前天 15:40
18
0
让你七天学会支付宝小程序开发!(附网盘链接)

今天分享给大家的是阿里云上开发小程序从入门到精通的资料,文末获取网盘链接 一、实现小程序云开通 1.1什么是小程序云? 1.2开发前准备 二、如何操作云数据库? 2.1云数据库使用 2.1.1设置数...

前天 15:36
19
0
阿里云网站全新启航,重新定义2.0时代的“一站式上云”

在刚刚过去的2020年云栖大会上,阿里云智能总裁张建锋宣布,阿里云正式从“飞天云平台”走向“数字原生操作系统”,进入2.0时代。 关于阿里云2.0,张建锋如此定义:“阿里云2.0,我认为就是云...

前天 15:31
67
0
快看!有关阿里云原生架构白皮书!(附网盘链接)

今天跟大家分享关于阿里云原生架构白皮书!文末附有网盘链接可获取全部 一、为什么需要云原生架构? 二、云原生架构的定义 1.云原生架构定义 2.云原生架构原则 3.主要架构模式 4.典型的云原生...

前天 15:17
12
0
快看!最全阿里开发者招聘技术专家面试题汇总!(附网盘链接)

今天给大家分享阿里开发者招聘技术专家面试题汇总,文末有网盘链接 面试题 001 如何实现一个高效的单向链表逆序输出? 面试题 002 已知sqrt (2)约等于 1.414,要求不用 数学库,求sqrt (2)精...

前天 14:20
40
0
速看!阿里内部资料,帮你快速入门视觉AI(附网盘链接 )

今天跟大家分享一份阿里内部资料,两大实践场景帮你入门视觉AI,文末获取完整链接 一、视觉生产技术探索和应用 1.视觉生产简介与理解 2.精细理解——寻微入里 3.视觉生成——从无到有 4.视觉...

前天 14:04
36
0
速看!阿里内部资料,帮你快速入门视觉AI(附网盘链接 )

今天跟大家分享一份阿里内部资料,两大实践场景帮你入门视觉AI,文末获取完整链接 一、视觉生产技术探索和应用 1.视觉生产简介与理解 2.精细理解——寻微入里 3.视觉生成——从无到有 4.视觉...

前天 14:04
12
0
SAE 的极致应用部署效率

作为 Serverless 平台,SAE 提供了应用全托管的服务,充分利用了云原生的技术红利,以容器作为应用载体,提供了敏捷的部署、编排、弹性等能力。SAE 屏蔽了底层的基础设施,对于用户来说,感知...

前天 11:17
18
0
SAE 的极致应用部署效率

简介: SAE 在应用创建、部署、重启过程中的效率优化。 作者 | 文俊 阿里巴巴云原生团队 本文整理自《Serverless 技术公开课》 作为 Serverless 平台,SAE 提供了应用全托管的服务,充分利用...

前天 11:06
51
0
数据湖有新解!Apache Hudi 与 Apache Flink 集成

Apache Hudi 是由 Uber 开发并开源的数据湖框架,它于 2019 年 1 月进入 Apache 孵化器孵化,次年 5 月份顺利毕业晋升为 Apache 顶级项目。是当前最为热门的数据湖框架之一。 1. 为何要解耦 ...

前天 11:03
20
0
数据湖有新解!Apache Hudi 与 Apache Flink 集成

简介: 纵观大数据领域成熟、活跃、有生命力的框架,无一不是设计优雅,能与其他框架相互融合,彼此借力,各专所长。 作者:王祥虎(Apache Hudi 社区) Apache Hudi 是由 Uber 开发并开源的...

前天 11:00
3.9K
1
2020 年国内 Serverless 用户规模:阿里云占比第一,达 66%

在中国信息通信研究院重磅发布的国内首个《云原生用户调查报告》中,阿里云 Serverless 产品凭借在双十一的技术锤炼和丰富的应用实践,在国内 Serverless 用户规模的占比达到 66%,远超其他云...

前天 10:54
32
0
从“等等”到“秒开”再到“直开”,是什么让闲鱼社区相见恨晚?

简介: 快让我叉会儿腰~ 作者:闲鱼技术-颂晨 背景 闲鱼前端页面的性能常常被人念叨,凡跳转、必跳鱼 的印象深入人心,部分页面甚至需要跳四五下才能打开,最近我们对闲鱼前端页面系统性的做...

前天 10:53
50
0
MQTT 在游戏运营发行中的实践

前言 在游戏生态中,主要包含游戏的研发方以及运营发行方。一款游戏的运行,分为研发和运营两个阶段。研发的主体有个人、独立工作室、游戏研发公司等; 游戏的研发主体专注于游戏内容的研发,...

前天 10:51
20
0
深度 | 容器规模化落地企业的最佳途径

随着云原生时代的发展,传统 IT 基础设施加速云化,云原生化成为云上的必然趋势。作为云原生代表技术之一,容器技术可帮助企业提升 IT 架构的敏捷性,加速应用创新,帮助企业更加灵活地应对商...

前天 10:41
24
0
从“等等”到“秒开”再到“直开”,是什么让闲鱼社区相见恨晚?

背景 闲鱼前端页面的性能常常被人念叨,凡跳转、必跳鱼 的印象深入人心,部分页面甚至需要跳四五下才能打开,最近我们对闲鱼前端页面系统性的做了些优化,由于闲鱼前端技术栈相对多元,不同栈...

前天 10:39
16
0
ipfs正舵者科技获海外多家媒体高度肯定

近期,正舵者科技受邀参与Filecoin太空竞赛,并在两次太空竞赛中获得优异成绩,引起行业内各界人士广泛关注和支持,多家海外主流媒体对此争相报道。 此次多家国际知名、权威海外媒体的报道,...

10/22 17:39
21
0
ipfs正舵者告诉你:主网启动周第二天: 官方谈岛屿经济和Filecoin挖矿的未来

10月21日,Filecoin官方博客上发布了有关主网启动周的一篇文章,主要探讨了Filecoin挖矿的未来以及其经济发展。 原文链接: https://filecoin.io/blog/mainnet-liftoff-day2/ 今天我们在Fil...

10/22 17:39
8
0

没有更多内容

加载失败,请刷新页面

返回顶部
顶部