微服务和 Serverless 架构-阿里微服务架构演进

本文涉及的产品
性能测试 PTS,5000VUM额度
应用实时监控服务-应用监控,每月50GB免费额度
注册配置 MSE Nacos/ZooKeeper,118元/月
简介: 微服务和 Serverless 架构-阿里微服务架构演进

开发者学习笔记【阿里云云原生助理工程师认证(ACA)课程:微服务和 Serverless 架构-阿里微服务架构演进】

课程地址:https://edu.aliyun.com/course/3112075/lesson/19025


微服务和 Serverless 架构-阿里微服务架构演进

 

课程目录

一、早期阿里的技术架构

二、淘宝基于新框架的服务化改造

三、Spring Cloud Alibaba全家桶形成微服务领域最佳实践

四、基于RocketMQ的消息产品家族

五、阿里前端全面拥抱云原生Serverless

六、微服务架构并发数技术指标与日俱增

 

一、早期阿里的技术架构

image.png

阿里巴巴的微服务架构之路,起点于2007年,在2007年前的一段时间里,阿里巴巴的淘宝业务经历了一个快速发展的阶段,在这个时间段,淘宝业务经历了之前的沉淀和打磨,达到了快速爆发的临界点。应用的活用用户量没几个月就以翻番的速度增长,相对应的功能需求的迭代速度也变得越来越快。

为了支撑业务的快速增长,及时响应功能需求的变化,淘宝技术团队的人员也随之进行了快速的增长。在2007年十月份左右,淘宝业务的技术人员团队已经达到了500人左右,内部的功能模块也达到了200多个,而当时淘宝所采用的软件架构仍然是基于传统1JB模式的单War应用,后端连接Oracle数据集群,在这种架构下团队之间的沟通成本不断升高,源代码冲突、版本冲突等问题出现的频率也越来越高。

同时,为了支持不断增长的流量,需要为应用不断增加服务器数量,这就导致了数据库连接的数量很快达到Oracle数据集群的上限。Oracle数据集群服务器的CPU占用率常年在百分之九十以上,这种由集中式架构带来的数据库压力使得系统存在严重的健康性风险。

另外,由于业务的快速迭代和不断修改,200多个业务模块之间的耦合度已经达到了难以梳理的程度,模块之间的过多依赖,以及公有资源之间的互相竞争,使得一个旧有业务代码的小修改,往往会引起其他代码出现意想不到的情况。而在当时,业界还没有微服务的概念,对于阿里巴巴这种体量的互联网应用,市面上也没有成熟的经验和模式可以借鉴。
但是,为了能够经历千辛万苦打磨出来的业务,能够持续、健康、快速的发展,阿里巴巴还是决定展开服务化架构的尝试与调整。

 

二、淘宝基于新框架的服务化改造

image.png

在服务化改造的过程中,淘宝团队经过谨慎的技术评估之后,决定先将数据复用率最高的用户操作部分进行拆分通过功能的梳理剥离出用户中心这样一个共享的服务层,不同于传统的集中式应用模式,由独立的团队进行运营使用单独的数据存储服务并且单独进行部署,这样就避免了单War、单数据库的各种弊端。

经过一段时间,用户功能中心开发完毕并测试稳定之后,淘宝团队将上层应用中所有用户业务相关的调用全部切换到了用户中心服务层的远程调用上,在经过一段时间的稳定和积累经验之后,新架构的用户中心服务层已经可以完全替代旧有的业务模块,同时实现了业务的服务不停机,被阿里人细称为给飞行中的飞机换发动机。

接下来,阿里巴巴启动了千岛湖项目,将更为核心的交易类和类目操作分离出来,组建了交易中心和类目中心。并且在之后的五彩石项目中继续提炼了店铺中心、商品中心、评价中心等一系列共享服务,初步完成了整个淘宝体系的服务化架构拆分。

经过近十年的服务化架构演进,目前阿里巴巴的服务中心总数量已经达到了五十多个,每个中心都有独立的团队进行专业维护,可以根据每个服务中心所承载的负载规模,单独进行记载资源和服务技术水平的扩展,有利的支撑了业务技术部门的海量用户量和快速迭代开发需求。

 

三、Spring Cloud Alibaba 全家桶形成微服务领域最佳实践

image.png
自从2011年Dubbo开源之后,阿里微服务团队就一直在内部产品的开源方面进行努力的探索,希望能够把阿里巴巴在微服务和应用托管体系的实践经验分享给用户,让支持阿里巴巴核心业务的微服务系统从封闭走向开放,服务更广泛的用户。
其中Spring Cloud阿里巴巴项目的推出,无疑是阿里巴巴在微服务领域中最具有代表性的贡献之一。
Spring Cloud是公司提出的基于Spring Bot用于开发微分布式应用的一款开源项目,其内部定义了微服务分布式开发的常用组件。如服务注册发现、服务熔断、分布式配置、服务调用、服务路由、分布式消息、消息总线等组件的接口规范。

2016年阿里开始全面拥抱Spring Bot,并将阿里原有的自研的诸多微服务中间件产品于Spring Bot开始进行整合,形成了基于阿里中间件的服务符合Spring Cloud规范的开源实现版本,也就是Spring Cloud阿里巴巴项目。
2017年12月Spring Cloud阿里巴巴顺利进入Spring Cloud孵化器,再次期间阿里巴巴再次提供了符合Spring Cloud微服务和应用组件。
2019年7月14日Spring官方宣布 Spring Cloud阿里巴巴项目正式毕业,这就意味着Spring Cloud阿里巴巴是国内首个进入Spring社区的开源项目,得到了广大开发者的广泛认可。

这里列举了Spring Cloud阿里巴巴项目的主要组件,其中包括服务注册发现、配置中心Nacos、RPC调用Dubbo、消息驱动RocketMQ、分布式事务Seata、在线调试Arthas、限流&熔断Sentinel、混沌测试ChaosBlade、消息队列RocketMQ。
同时Spring Cloud阿里巴巴还实现了很多对阿里云商业组件的集成,在用户上云并进行云原生改造中具有强大的先天优势。

 

四、基于 RocketMQ 的消息产品家族

image.png

从2007年阿里采用五彩石项目开始,淘宝原有的单体服务架构逐步被拆分成了包含用户中心、商品中心、交易中心、评价中心等50多个应用中心的平台型应用架构。而这时候系统和系统之间的交互就变的非常的重要,于是阿里中间件团队在2007年开发了第一代自研中间件Notify,用于淘宝业务中系统和系统之间的义务调用消息流转。紧接着在2010年阿里团队开始大规模使用ActiveMQ,并打造了自己的消息引擎Napoli,但是无论是Notify还是Napoli,在阿里巴巴不断增加的业务之下,都会出现由于消息数量过大处理不及时导致的消息堆积问题。

于是阿里巴巴综合之前的消息队列产品的优势,并结合阿里巴巴自身的技术特点和要求,开发了支持严格收取数据消息和海量消息堆积的新一代消息队列产品MetaQ,并在2012年升级为RocketMQ。此后RocketMQ就一直承载着阿里巴巴核心链路的消息流转,历经多年双11万亿级消息洪峰的严苛考验,创造了国内乃至世界上最大的消息流转记录,到今天阿里巴巴线上所有消息全部通过RocketMQ进行转发投递,同时支撑了全集团3000多个业务,为复杂业务场景提供了填补的能力。保证了系统核心业务的低延迟高吞吐,为阿里巴巴的大中台和服务化架构的稳定发挥着举足轻重的作用。

2012年RocketMQ正式进行了开源,阿里巴巴的消息中间件走入了公众的视野。
2016年11月28日,阿里巴巴宣布将开源分布式消息中间件产品RocketMQ捐赠给Apache成为孵化项目,孵化成功后RocketMQ成为国内首个互联网中间件,在Apache上的顶级项目,成为全球继ApacheMQ卡夫卡之后分布式消息引擎架构中的新成员。

 

五、阿里前端全面拥抱云原生 Serverless

image.png2020年双11阿里巴巴集团的前端应用,全面拥抱云原生Serverless,淘系、飞猪、淘宝、CPU、ICPU、优酷、考拉等十数个BU共同落地了以Node.js为平台Faas在线服务架构为核心的云端一体研发模式,在保障稳定性,高资源利用率的前提下多个BU的重点营销场景全面实现了研发模式的升级。通过采用前端Faas支撑的云端一体研发模式,交付平均效率提高了38.89%。

同时依托Serverless的便利性和可靠性,淘宝、天猫、飞猪等双11会场页面,全面快捷落地了SSR技术,提高了用户的界面体验。除了保障大促以外,日常弹性下也较以往减少了30%的计算成本。
另外在个性化业务推荐场景下数以千计的易购应用运营成本一直是这个场景下的运营痛点。
而Serverless天生的弹性伸缩能力正式个性化推荐业务最为理想的技术支撑。通过Serverless化进一步解放运维负担,让开发者专注于业务的算法创新。

目前这个场景的应用范围越来越大,已经覆盖了几乎整个阿里系列APP,如淘宝、天猫、支付宝、优酷、飞猪等等。而推荐业务的大大接入又可以推动底层业务开发人员对机器利用效率方面做更多地优化。
通过智能化调动在峰值时期及其利用率已经可以达到60%。总体来说Serverless成绩单非常显眼,在双11大促中,不单承担了部分核心业务,流量也突破新高,帮助业务部门抗住了百万QBS的流量洪峰。

 

六、微服务架构并发数技术指标与日俱增

image.png

随着软件架构的不断演进,阿里巴巴的底层技术架构和业务能力也有了突飞猛进的提高,以双11峰值交易额为例,从2009年的400笔每秒进化成了2020年的58300笔每秒,11年间增长了将近1500倍,可以说云计算服务化Serverless消息队列云原生为代表的不断演进的技术架构,为今天阿里巴巴如此巨大的业务规模打下了坚实的技术基础。

以上就是阿里巴巴十多年来技术演进历程中一些重要的技术和节点的讲解。

相关实践学习
【文生图】一键部署Stable Diffusion基于函数计算
本实验教你如何在函数计算FC上从零开始部署Stable Diffusion来进行AI绘画创作,开启AIGC盲盒。函数计算提供一定的免费额度供用户使用。本实验答疑钉钉群:29290019867
建立 Serverless 思维
本课程包括: Serverless 应用引擎的概念, 为开发者带来的实际价值, 以及让您了解常见的 Serverless 架构模式
相关文章
|
25天前
|
缓存 负载均衡 JavaScript
探索微服务架构下的API网关模式
【10月更文挑战第37天】在微服务架构的海洋中,API网关犹如一座灯塔,指引着服务的航向。它不仅是客户端请求的集散地,更是后端微服务的守门人。本文将深入探讨API网关的设计哲学、核心功能以及它在微服务生态中扮演的角色,同时通过实际代码示例,揭示如何实现一个高效、可靠的API网关。
|
6天前
|
弹性计算 API 持续交付
后端服务架构的微服务化转型
本文旨在探讨后端服务从单体架构向微服务架构转型的过程,分析微服务架构的优势和面临的挑战。文章首先介绍单体架构的局限性,然后详细阐述微服务架构的核心概念及其在现代软件开发中的应用。通过对比两种架构,指出微服务化转型的必要性和实施策略。最后,讨论了微服务架构实施过程中可能遇到的问题及解决方案。
|
23天前
|
Cloud Native 安全 数据安全/隐私保护
云原生架构下的微服务治理与挑战####
随着云计算技术的飞速发展,云原生架构以其高效、灵活、可扩展的特性成为现代企业IT架构的首选。本文聚焦于云原生环境下的微服务治理问题,探讨其在促进业务敏捷性的同时所面临的挑战及应对策略。通过分析微服务拆分、服务间通信、故障隔离与恢复等关键环节,本文旨在为读者提供一个关于如何在云原生环境中有效实施微服务治理的全面视角,助力企业在数字化转型的道路上稳健前行。 ####
|
28天前
|
设计模式 Java API
微服务架构演变与架构设计深度解析
【11月更文挑战第14天】在当今的IT行业中,微服务架构已经成为构建大型、复杂系统的重要范式。本文将从微服务架构的背景、业务场景、功能点、底层原理、实战、设计模式等多个方面进行深度解析,并结合京东电商的案例,探讨微服务架构在实际应用中的实施与效果。
93 6
|
28天前
|
设计模式 Java API
微服务架构演变与架构设计深度解析
【11月更文挑战第14天】在当今的IT行业中,微服务架构已经成为构建大型、复杂系统的重要范式。本文将从微服务架构的背景、业务场景、功能点、底层原理、实战、设计模式等多个方面进行深度解析,并结合京东电商的案例,探讨微服务架构在实际应用中的实施与效果。
37 1
|
5天前
|
Java 开发者 微服务
从单体到微服务:如何借助 Spring Cloud 实现架构转型
**Spring Cloud** 是一套基于 Spring 框架的**微服务架构解决方案**,它提供了一系列的工具和组件,帮助开发者快速构建分布式系统,尤其是微服务架构。
101 68
从单体到微服务:如何借助 Spring Cloud 实现架构转型
|
23天前
|
Dubbo Java 应用服务中间件
服务架构的演进:从单体到微服务的探索之旅
随着企业业务的不断拓展和复杂度的提升,对软件系统架构的要求也日益严苛。传统的架构模式在应对现代业务场景时逐渐暴露出诸多局限性,于是服务架构开启了持续演变之路。从单体架构的简易便捷,到分布式架构的模块化解耦,再到微服务架构的精细化管理,企业对技术的选择变得至关重要,尤其是 Spring Cloud 和 Dubbo 等微服务技术的对比和应用,直接影响着项目的成败。 本篇文章会从服务架构的演进开始分析,探索从单体项目到微服务项目的演变过程。然后也会对目前常见的微服务技术进行对比,找到目前市面上所常用的技术给大家进行讲解。
40 1
服务架构的演进:从单体到微服务的探索之旅
|
21天前
|
消息中间件 监控 安全
后端架构演进:从单体到微服务####
在数字化转型的浪潮中,企业应用的后端架构经历了从传统单体架构到现代微服务架构的深刻变革。本文探讨了这一演进过程的背景、驱动力、关键技术及面临的挑战,揭示了如何通过微服务化实现系统的高可用性、扩展性和敏捷开发,同时指出了转型过程中需克服的服务拆分、数据管理、通信机制等难题,为读者提供了一个全面理解后端架构演变路径的视角。 ####
44 8
|
22天前
|
Cloud Native 安全 API
云原生架构下的微服务治理策略与实践####
—透过云原生的棱镜,探索微服务架构下的挑战与应对之道 本文旨在探讨云原生环境下,微服务架构所面临的关键挑战及有效的治理策略。随着云计算技术的深入发展,越来越多的企业选择采用云原生架构来构建和部署其应用程序,以期获得更高的灵活性、可扩展性和效率。然而,微服务架构的复杂性也带来了服务发现、负载均衡、故障恢复等一系列治理难题。本文将深入分析这些问题,并提出一套基于云原生技术栈的微服务治理框架,包括服务网格的应用、API网关的集成、以及动态配置管理等关键方面,旨在为企业实现高效、稳定的微服务架构提供参考路径。 ####
43 5
|
25天前
|
监控 API 微服务
后端技术演进:从单体架构到微服务的转变
随着互联网应用的快速增长和用户需求的不断演化,传统单体架构已难以满足现代软件开发的需求。本文深入探讨了后端技术在面对复杂系统挑战时的演进路径,重点分析了从单体架构向微服务架构转变的过程、原因及优势。通过对比分析,揭示了微服务架构如何提高系统的可扩展性、灵活性和维护效率,同时指出了实施微服务时面临的挑战和最佳实践。
47 7

相关产品

  • 函数计算