Serverless 下的微服务实践
作者:弈川
审核&校对:筱姜、潇航
编辑&排版:雯燕
微服务架构介绍
微服务架构诞生背景
在互联网早期即 Web 1.0 的时代,当时流行的是单体应用,研发团队比较小,主要是外部网页,然后新闻门户等;到了新世纪的互联网时期 Web 2.0 时代,网民数量大幅激增,相继出现电商、社交这样巨无霸级别的互联网产品,出现了几百人甚至上千的研发团队在一个场景下,流量及业务复杂度相较于上一个时代有了质的变化,因此单体服务的弊端:例如研发效率等问题便显现出来。
此时出现了一个叫 SOA 的架构,其架构思路与微服务很像,它有类似于 ESB 这种中心化组件,阿里的 HSF,包括后来开源的 Double,都是在此阶段诞生的。
移动互联网时代出现之后,各种各样的 APP 诞生,生活也开始全面互联网化。大流量高并发以及规模化的研发团队变得越来越寻常,相应对高技术、生产力的要求也在逐步提升,此时微服务的概念应运而生。
微服务其实一直贯穿在整个架构的发展过程中。在 Java 的技术栈,类似于 Spring Cloud 、Double 这些框架都已经非常流行。不难发现整个社会已经步入数字化高速发展阶段,此时更大的问题蕴含其中,如流量升高、应用复杂度提升,研发团队扩大、对于效率的要求提高等等。
单体时期 1.0 版本
大部分的公司或早期业务都会经历过这样的过程(如图所示):先是客户端,此时需要通过一个入口访问,上图中 SLB 是阿里云一个负载均衡服务,它相当于一个网络入口,可以对应到 ECS(ECS 为阿里云的虚拟机)打到对应的单体的服务中,而此时他们会共用一个数据库,这是第一个时期。
单体时期 2.0 版本
到第二个时期 SOA 架构:此时出现了分治的思想,它会将一些业务进行拆分。但它并未做到服务与底层的拆分,如存储数据库的拆分,其本质上还是共用一套数据库,因此它还是单体的架构。
微服务时期
而到微服务时期,如若客户端通过 SLB 访问网关(如图所示),随后会转发对应的服务,且服务与服务之间会产生一些调用;每个服务会对应一个单独的数据库或缓存,且每个服务会通过类似于 Nacos 这种的服务进行注册、发现以及配置管理。
微服务引入之后,虽然解决了架构业务的分离,能够让研发团队在某一个领域、业务能够做到精专,不过从整体架构来看便会发现,相较于之前,它其实是更为复杂的,所以也带来一些运维上的问题。
在单体架构中,于单体应用而言,会发生边界不清晰、模块耦合、共享代码库容易冲突的问题,同时如果团队规模较大,此时的协作效率也会相对较低。但是微服务架构的核心就是解耦,如果做到拆分之后的解耦,就可以释放开发团队效率。
云原生时代微服务架构发展
微服务技术在云原生时代的技术引进
云原生是一个很宏观的概念,如果我们以微服务为起点来看云原生给微服务带来的变化与演进,可以更好地帮助我们理解什么是云原生。
微服务和单体应用的本质是什么呢?(如图所示)它其实是把单体应用从一个巨型的应用拆分成数个微小的服务,协作来完成原先单体应用等效的业务服务。此时微服务与微服务之间会形成一个依赖关系,它需要部署至一个或多个资源上,这时的资源便是计算资源。
过去单体应用与资源之间的关系十分简单,单体应用的协同也都是一些内部协同,不存在外部动态的依赖。但架构转换到微服务之后,由于外部依赖和节点数量的爆炸,整个体系会变成网状,管理起来十分复杂。超过 50% 的企业会觉得采用微服务架构,最大挑战是复杂的运维,即整个服务生命周期的管理。
如今,比较公认的一点是云原生的根基在于容器与容器的管理编排(K8s)。而容器与 K8s 的技术能够帮助我们解决微服务体系中所存在繁杂运维的问题。
首先不同的微服务之间会存在异构,即一个团队,在微服务体系下为了发挥最大效能,可能会允许不同小团队采用不同的编程语言、运行环境去运行微服务。因此最初我们在运维和管理微服务时,是没有统一的标准去处理这些异构环境的。这便促发了云原生容器技术的流行,因为这项技术的作用就是通过一层标准化的运行时和封装来限制微服务部署。这样从生命周期与管理角度来看,每一个微服务之间的差异变少,十分有利于资源的调度。
随后。基于容器调度衍生出了容器平台。容器平台就是管理容器的,就 K8s 来说,它可以标准便捷地将微服务运行到底层的资源上,随后存储计算网络可以通过 K8s 这层来进行统一封装,一层抽象与封装,它类似于云原生时代的操作系统。
它具体会提供哪些帮助呢?在 K8s 中有个概念叫 POD ,POD 是一组容器的结合,与微服务实体生命周期的耦合,在一个 POD 里面,它可以运行一个或者是多个容器。
采用微服务架构时,一般会把微服务运行的主体放在主容器中,也就是把微服务执行的主逻辑放在主容器里面。此时主容器的生命周期与 POD 的生命周期是完全耦合的,POD 什么时候消亡,微服的运行主体便何时消亡。除此之外我们还会运行一些边车容器— Sidecar,它主要是为主容器提供辅助功能,如日志采集、网络代理、身份鉴权等 。此时的微服务便除了提供自身核心业务以外,它还可以动态的提供额外辅助能力,这让微服务的管理变得更加稳定与便捷。
POD 这个模型还提供了许多非常有用的功能,比如状态信息。(状态信息是指:POD 会提供一个标准的接口来显示运行时的状态)通过这个信息状态可以出判断微服务或是容器的运行状态,如它是否处于运行中、业务是否已经准备好可以迎接流量接入,POD 为整体的稳定性提供了保障。另一个是地址服务功能,每个 POD 会有一个标准化的 DNS 地址服务,它对于需要统一暴露出来的 API ,日志监控追踪能力都十分有帮助。通过 DNS 的日志地址来访问以及暴露的可观测性信息,可以快速发现运行时的问题。由此便可总结:容器及容器平台能够在微观上帮微服务具备更多的能力。
图中为 4 种发布模型:
- 滚动更新
- 固定更新
- 蓝绿部署
- 金丝雀发布(灰度发布)
流量治理
微服务将过去单体时期静态的通信关系,通过拆分编成动态运行时。通常服务间的通信与协同是需要单独管理的,微服务框架帮助我们进行了每个服务通用功能的抽象与实现。
抽象层面包含两方面:业务逻辑与通信、流量、服务治理能力。我们可以将底层通用能力抽象成一个具体的框架,但是不同微服务之间的框架是没办法实现相互调用的。而到了云原生时代,它能够使用不同的开发语言以及模型进行编程,实现微服务的研发。
Service Mesh 服务网格就是为了解决流量治理在多语言,多环境下的问题而出现的。
在数据层面,Sidecar 负责流量劫持转发以及管理,该功能典型 Sidecar 实现就是 Envoy。
如图它会先将上面部分从框架层面抽象出来后与业务直接进行解耦,将通用能力放在 Sidecar 中,通过 Sidecar 之间的通信、转发去管理;这样会使问题变得简单很多。开发者只需要在流量管理和 Sidecar 之间通信,不同技术栈的微服务实例便可实现互相通信。
除了数据层面,我们还需要管控层面的支持。需要一个组件来实现原微服务体系中的策略规则的管理,经典实现就是 Istio。比如在原来在微服务体系中的服务注册、服务发现、流量观测等能力是需要管控层面的主线去完成的。有这些能力之后它就组成了 Service Mesh。我们可以通过管理 POD 中的流量以及数据层面的单点,让他们形成网状结构,变成集群实现流量的分配、安全、观测。
图中的编程模型与函数计算相关
请求驱动是基于请求的动态弹性伸缩,并简化请求处理的逻辑。微服务的调用,从流量进来后,会经过 4 层或者 7 层的负载均衡分发到不同的微服务实例;但是在同一个微服务实例进程的内部,一般会有两个逻辑:第一个是请求管理,它可能是一个 HTTP 服务器,或者是一些 Handler,也可能是一些队列管理,请求分发能力的组成;这些组成最终会将请求提交到第二部分,即请求处理中,而请求处理也是开发者真正需要实现的一些逻辑。
比如说 Java Go 、Python,它们都有自己的一套请求管理逻辑,请求管理和请求处理之间会形成强烈的耦合,这个实例既包含请求的管理,又包含请求处理的逻辑。在这个架构下不存在一个全局独立,且可以感知到请求去进行流量管理的控制层,只有到整个实例自身的处理层才如此解释请求。即便此时微服务实例已然过载,也很难再次将这个请求转发到其它微服务实例上进行负载均衡。因此请求驱动系统就是查数据、并解决这两个要素,开发者实际在做的就是请求驱动的解耦。
如图所示,首先外部系统传输过来的请求会先进行标准化,有一个适配器;标准化之后就会将其放在请求负载均衡器中,这个负载均衡器可以理解该请求本身的语义;然后它可以驱动并进行处理。当处理单元不够时,它可以通过管理器来进行扩容;逻辑单元比较多时,它还可以进行缩容,这样便形成了一个动态管理,可以为开发者节约非常多的成本。
请求驱动模型:
- 请求标准化
- 请求路由
- 处理管理
将请求标准化、请求路由、处理管理等组合起来,便与 Serverless 的概念吻合。开发者根本不需要去关心 Server ,只需要去专注业务逻辑即可。这其实也是微服务体系与平台化的 Serverless 架构融合的过程。阿里云的 FC (函数计算)和 SAE(应用引擎) 都是以解决这些问题为核心的。
微服务+Serverless的最佳实践
Serverless 其实经过了很多年的发展,其理念最早可以追溯到 2012 年;而2014 年 AWS 正式推出 Lambda,才掀起了 Serverless 浪潮;但随后而来的是一段沉静的发展期。这种情况出现的原因是为什么呢?分析来看是因为函数计算的开发模式与原本模式有非常大的出入,它更适合前端而不是 long running 形式的一些应用,它更偏向基于请求的一些处理。因此那些需要长时间运行的服务或应用架构便不太能够享受到 Serverless 所带来的弹性和降本提效等红利。
微服务架构的痛点
微服务的痛点在于稳定性。微服务带来了许多其他组件。例如服务发现、或是其他的一些工具类的产品,这些在单体情况下会变得更加复杂,因为整个架构变成网状结构。容器与容器平台在某些程度上是帮助我们承载微服务这部分的运维的,但是其本身如容器 K8s 都是存在一定复杂性的。
K8s 的架构图
K8s 不仅复杂也存在一些痛点:
- 容器镜像部署方式差异
- K8s 组件运维的复杂
- 学习成本
对于开发者来说是最有吸引力的是不需要改变原本的开发方式的基础上可以将精力专注于业务逻辑。而微服务比较理想的状态也是开发者只需关注架构中的业务系统,其它部分如:网关 CICD 发布系统、验货流程,注册中心、告警监控、分析日志,这些通通都不再需开发者再去关心。其优势可以总结为:
- 让开发者专注业务逻辑
- 不改变原有开发方式
- 无需关心与运维底层资源
- 具备弹性能力可以降低闲时成本
- 优秀的工具链
总结
微服务体系在整个云计算发展的时代有不同的事件。如最开始部署就是传统的 IT 设施,像 IDC 这种机房,微服务提供的是静态的物理计算资源。
然后到了第二步就是云托管时代,就是我们大家所熟知的 VM,阿里的话就是 ECS ,它可以提供弹性的计算资源,但它并没有实质的改变,只是资源上变成弹性,它对于服务、微服务的部署,包括管理运维等本质上都没有太大变化。
到了第三阶段云原生时代,云平台、云服务都可以承担这些复杂的运维操作、配置、管理。微服务提供的就是一个运行环境与平台,此时用户只需要去关心业务系统、以及如何实现业务系统即可。将复杂的技术变得越来越简单,让用户不再感知那些烦杂的操作,由平台代替用户去做重复的、难以维护的工作,这也十分符合计算机技术整体的发展方向。
作者介绍:
弈川|阿里云云原生团队
目前从事阿里云 Serverless 应用引擎的研发工作,专注于aPaas、微服务、分布式系统、Serverless 工具链等方向,致力于打造下一代 Serverless 平台,让传统应用的开发者能零改造、低成本的享受 Serverless、K8S 等技术红利。
相关链接:
1)社区官网
http://www.serverless-devs.com/
2)项目仓库
https://:.com/Serverless-Devs/Serverless-Devs
3)Serverless Desktop 桌面客户端
https://serverlessdevs.resume.net.cn/zh-cn/desktop/index.html
4)Serverless 应用开发者套件
http://serverless-dk.oss.devsapp.net/docs/tutorial-dk/intro/react
5)Serverless Devs CLI
https://serverlessdevs.resume.net.cn/zh-cn/cli/index.html
6)Serverless Hub 应用中心
https://serverlesshub.resume.net.cn/#/hubs/special-view
点击此处,看相关视频版解析~
Serverless 下的微服务实践的更多相关文章
- Serverless 微服务实践-移动应用包分发服务
背景 阿里云函数计算是事件驱动的全托管计算服务.通过函数计算,您无需管理服务器等基础设施,只需编写代码并上传.函数计算会为您准备好计算资源,以弹性.可靠的方式运行您的代码,并提供日志查询.性能监控.报 ...
- .netcore下的微服务、容器、运维、自动化发布
原文:.netcore下的微服务.容器.运维.自动化发布 微服务 1.1 基本概念 1.1.1 什么是微服务? 微服务架构是SOA思想某一种具体实现.是一种将单应用程序作为一套小型 ...
- 干货 | 国内互联网公司是如何做微服务实践的?(附PPT下载)
微服务的概念最早由Martin Fowler与James Lewis于2014年共同提出,并随着Netflix最佳实践的发布而为业界所知.如今,在国内有了大量的微服务实践案例,5月18日,网易云联合云 ...
- 都 2021 年了,Serverless 能取代微服务吗?
来源 | Serverless 公众号 编译 | OrangeJ 作者 | Mariliis Retter "Serverless 能取代微服务吗?" 这是知乎上 Serverle ...
- 2019年微服务实践第一课,网易&谐云&蘑菇街&奥思技术大咖深度分享
微服务的概念最早由Martin Fowler与James Lewis于2014年共同提出,核心思想是围绕业务能力组织服务,各个微服务可被独立部署,服务间是松耦合的关系,以及数据和治理的去中心化管理.微 ...
- QCon技术干货:个推基于Docker和Kubernetes的微服务实践
2016年伊始,Docker无比兴盛,如今Kubernetes万人瞩目.在这个无比需要创新与速度的时代,由容器.微服务.DevOps构成的云原生席卷整个IT界.在近期举办的QCon全球软件开发大会上, ...
- SFDC 微服务实践之路 2016.12.10 杭州(整理)--转
原文地址:http://mp.weixin.qq.com/s/8cC4Ewt6yPjnxdYxuNZlFQ 微服务是什么? 微服务是一种细粒度(Fine-Grain)的SOA 或许在座的高朋了解过其概 ...
- 微服务实践(七):从单体式架构迁移到微服务架构 - DockOne.io
原文:微服务实践(七):从单体式架构迁移到微服务架构 - DockOne.io [编者的话]这是用微服务开发应用系列博客的第七篇也是最后一篇.第一篇中介绍了微服务架构模式,并且讨论了微服架构的优缺点: ...
- 微服务实践(五):微服务的事件驱动数据管理 - DockOne.io
原文:微服务实践(五):微服务的事件驱动数据管理 - DockOne.io [编者的话]本文是使用微服务创建应用系列的第五篇文章.第一篇文章介绍了微服务架构模式,并且讨论了使用微服务的优缺点:第二和第 ...
随机推荐
- 超简洁,玩转springboot 之springboot自定义start工程
springboot 的start 建一个父工程 不需要其他目录结构,需要注意的是把type的类型改为POM 这样就没有工程的目录结构 因为父工程不需要 给父工程的pom添加依赖 <depend ...
- NOIP 模拟 六十八
咕了十几场了,还是写一写吧.. T1 玩水 发现满足三个人路径不同必须要有2个及以上的斜线相同结构,需要注意如果同一行或者同一列的话必须要相邻才行. #include<bits/stdc++.h ...
- 洛谷5024 保卫王国 (动态dp)
qwq非正解. 但是能跑过. 1e5 log方还是很稳的啊 首先,考虑最普通的\(dp\) 令\(dp1[x][0]表示不选这个点,dp1[x][1]表示选这个点的最大最小花费\) 那么 \(dp1[ ...
- Kubernetes client-go 源码分析 - Reflector
概述入口 - Reflector.Run()核心 - Reflector.ListAndWatch()Reflector.watchHandler()NewReflector()小结 概述 源码版本: ...
- 原生js-无缝滚动
<!DOCTYPE html> <html lang="en"> <head> <meta charset="UTF-8&quo ...
- 记一次关于pdf 下载需求变更到 pdf 在线预览
背景: 之前的需求是根据接口中提供的Blob数据实现PDF下载,已实现代码如下: 1 const url = window.URL.createObjectURL(newBlob([response. ...
- AIApe问答机器人Scrum Meeting 5.1
Scrum Meeting 5 日期:2021年5月1日 会议主要内容概述:汇报两日工作. 一.进度情况 组员 负责 两日内已完成的工作 后两日计划完成的工作 工作中遇到的困难 李明昕 后端 Task ...
- 全志TinaLinux编译错误fatal error: unicode/ucnv.h: No such file or directory
今天开始正式干活了 拿到一个全志Tina的板子还有一个SDK压缩包,要求我这周(只剩一天半...)就要把sdk编译通过并且把板子跑起来. 还特别跟我说他们试了下这个sdk编译没法通过,会报错... 竟 ...
- (转)刚来的大神彻底干掉了代码中的if else...
一旦代码中 if-else 过多,就会大大的影响其可读性和可维护性. 首先可读性,不言而喻,过多的 if-else 代码和嵌套,会使阅读代码的人很难理解到底是什么意思.尤其是那些没有注释的代码. 其次 ...
- Linux部署Apollo+.Net Core简单使用
Apollo官方网站非常详细,以下只是本人学习过程的整理 一.概念 Apollo(阿波罗)是一款可靠的分布式配置管理中心,能够集中化管理应用不同环境.不同集群的配置,配置修改后能够实时推送到应用端,并 ...