EDAS:快速搞定分布式应用

简介: 谁又动了我模块接口?谁又改了我模块逻辑??? 有bug!模块之间的调用跟个蜘蛛网一样,我怎么排查! 这么复杂的调用逻辑,我的自动化测试用例咋写?! 。。。作为一个开发者,你是否经历过这样的咆哮?这样的场景出现,不是谁的脾气有bug,而是打开方式或许不对。

本期分享嘉宾: 滨雨
多年IT领域工作经验,先后在华为、阿里基础架构部担任软件工程师、项目经理。目前从事存储、cdn、视频、中间件等技术领域的支持,喜欢新技术,喜欢新挑战,喜欢钻研。

  • 攻城狮:谁又动了我模块接口?谁又改了我模块逻辑???

  • 运维:有bug!模块之间的调用跟个蜘蛛网一样,我怎么排查!

  • 测试:这么复杂的调用逻辑,我的自动化测试用例咋写?!

  • 架构师:业务上升了,系统要部署到多台服务器才行,这我怎么拆?!

  • 新人入职后:代码太难理解,想shi的心都有了…….

  • 老板:为啥大半年过去了需求还没搞定!!!
作为一个开发者,你是否经历过这样的咆哮?
这样的场景出现,不是谁的脾气有bug,而是打开方式或许不对。今天我们就通过一个真实案例,来看看分布式开发对消灭吐槽,促进团队和谐的作用。

单体应用很丰满,现实很骨感

X公司是一个秉承传统的开发方式的典型,如下图的架构图是一个实际场景中的架构图,按照传统的开发方式,业务模块层按照“高内聚低耦合”的原则划分成不同的模块,所有模块的开发人员都是在一个大工程下进行编码测试,模块之间的业务划分的很清晰。

2ca17d8ae4d343ad2dbb39b86bde52b6f3cab8d9
X公司架构图
但理想是丰满的,现实很骨感,按照很“完美”的模块划分后,在一个大的应用工程下进行开发进行开发,但随着系统功能越来越强大,,软件复杂度急剧增加,开发人员的新旧交替,慢慢的单体应用给开发团队、产品发展等造成的直接弊端,系统维护变得异常艰难。
一切不完美,都可以坦然面对

在这种情况下,估计很多的开发团队估计都会想到用分布式应用来解决。但是,分布式应用就一定是完美的吗?答案当然是否定的。分布式应用也难免存在很多问题,例如:
  • 如何保证服务之间调用链路的稳定性
  • 如何保证服务调用安全性
  • 遇到应用需要扩容时候该怎么办
  • 应用拆分了,都需要单独部署,我能怎么更方便管理应用部署问题
  • 服务调用的性能能保证吗
  • 毕竟是由本地调用改为了rpc方式,我需要怎样更方便的监控调用链路呢?
  • 分布式事务的问题要如何解决呢?
这些问题其实如果要全部解决,也是个浩大的工程。还好,不完美的世界不需要一个人面对,总有些人在寻找解决方案。比如阿里云中间件产品EDAS,就是为分布式开发的不完美提供了不少解决方案。

什么是EDAS
企业级分布式应用服务(Enterprise Distributed Application Service, 简称 EDAS)以阿里巴巴中间件团队多款久经沙场的分布式产品作为核心基础组件,面向企业级云计算市场提供高可用分布式解决方案,是阿里巴巴企业级互联网架构解决方案的核心产品。
EDAS架构解密
15ed4b21d24043b422e7eee90f31dd548ecf5e8b
  • EDAS控制台:对用户操作层,以及对外提供api服务的系统
  • 数据收集系统:包括链路监控、服务监控、基础监控等数据的采集存储和分析
  • 配置注册中心系统:开发分布式应用所依赖的注册中心,包括服务端和消费端服务信息、服务地址信息、配置信息等
  • 监控报警:可以提供报警支持,自定义报警规则,确保业务有风险时负责人能第一时间收到消息
EDAS能做什么
1、搭建分布式应用系统
快速基于EDAS开发好分布式应用,减少大量开发工作,应用可以是服务提供者,也可以是服务消费者,也可以两者都是
0be2667dadf0100dcb3a7080bdbe835795afe7f6
2、应用生命周期管理
5e8ddb381cdb783d34c9875204340a81f2fda78c
3、链路调用监控
实际的大型系统中,都有很复杂的业务链路调用,如果将单体应用重构为分布式应用后,没有一套良好的监控体系,在系统出现问题时定位问题将会异常困难。如图是一个实际场景下的链路调用:
40612c6ca701c480572fc8c63bcb6345d75bd069
EDAS 鹰眼监控系统能够分析分布式系统的每一次系统调用、消息发送和数据库访问,从而精准发现系统的瓶颈和隐患
d68e6a11685f792680f749489cb72847c3265836
根据应用来监控到链路调用信息
89b4d75212f90e5591285f1c00d5fb824c2efa5a
从具体监控信息定位到影响性能的环节
4、分布式事务
当应用拆分成分布式架构后,难免会遇到分布式事务问题,阿里云也提供了对应的产品解决这个问题,全局事务服务(Global Transaction Service,简称 GTS),是一款高性能、高可靠、接入简单的分布式事务中间件,用于解决分布式环境下的事务一致性问题。
经过多年的发展和实践,EDAS等中间件产品已经在阿里内部得到广泛的应用,如图所示的案例场景:
5b063f6049cf0163d3a0140a2f08dd644ed4ff3d

X公司开发案例实战

像开头说到的,当系统到达一定规模后,软件复杂度急剧增加,维护也将变得异常艰难。如何用挽救X公司于水深火热之中?下图是将业务拆分后一部分业务架构:
04b873c9b3a3e017bb7d430e8d3c9c28d10f5ac6
A公司架构图
其中,将资产中心和鉴权中心采用docker部署的方式,docker部署的方式可以支持一台服务器上部署多个应用,这样也有利于节省硬件成本,提高资源利用率。
业务开发
代码工程划分
整体思路是提供一个公共的接口应用,作为公共引入的jar包(这只是其中一种开发模式),其他每个应用一个工程,采用maven工程的模式来开发。本地开发时,如果几个应用工程都在同一个环境下,可以将几个groupId都指向同一个,方便调试。下图是工程划分:
4c6c10b303b9e1bdf35864d8b1c8cc5eedfbfea3
接口应用开发
在接口应用中将需要被不同应用引用的实体以及需要对外暴露的接口都定义好。如图所示
4f0b98400abaf06e241e1fa94fd814401dec8023
创建好后eclipse工程如截图:
c3514df81a5cce01d58a7684fa5470e591e5c26e
部分代码片段:
b03efce27d98aacbef44e358d621cb6bcf43ca4a
引入接口工程
将tradeshop-api工程打成jar包发布到maven仓库,在其他三个工程pom文件引入:
<dependency>
<groupId>com.alibaba.edas.tradeshop</groupId>
<artifactId>tradeshop-api</artifactId>
<version>1.0.2</version>
</dependency>
资产中心开发
产中心要实现的业务是能够被交易中心调用、获取资产信息,所以资产中心需要做的是实现获取资产信息的接口业务,并且用hsf标签对外注册提供服务。例如简单的业务实现代码为:
0ee6aae8e4ab626395bb45ed5e49ae09306b6983
代码实现后,就需要将服务对外暴露,供服务消费端来调用:
c19f733851ee549252ff33b039617ca4eb9ceacf
需要注意的是,发布的服务中version和group固定了,那么消费端在调用的时候,这两者的值必须保持统一。
鉴权中心开发
鉴权中心实现的业务是提供对外的接口用来查询鉴权信息,那么也是需要对外暴露一个服务,开发方式跟资产中心类似,可以参考资产中心的开发。
交易中心开发
交易中心需要有两方面的作用,一是对外暴露服务用于查询交易信息,一个是充当消费端,主动去调用其他服务。充当服务端的代码开发模式和前两个应用类似,充当消费端去调用资产中心和鉴权中心的,就可以采用spring bean加载的方式获取到接口service,然后当做本地方法来调用,如核心代码:
4ce09de0d4bf62b64ba38a4a9fd9eea7c2522203
将依赖的服务和需要发布的服务配置,注意版本号和分组值,以及接口名不能写错。
be58aff243b45d5de0d3c829b4ee2d523c551d55
用户中心开发
用户中心在本案例中充当业务入口,去调用交易服务,所以用户中心只需要注册消费一个服务即可: 12a35b28d69361884aa50136bc236b334a3011a8
消费代码: 88a669dbd2fe8710e7653b88b6898e7744063da9
业务验证
参考EDAS官网文档,创建好应用,并成功将应用部署到线上后,可以在EDAS控制台上很方便的进行业务验证,链路跟踪,也就能很方便的定位到平时业务之间链路的瓶颈所在。
应用服务验证
当应用部署成功后,可以在控制上看到提供的服务和调用的服务,也可以在应用控制台上看到业务运行的日志,如截图所示 4b2565ba243d67cd5456a0fe44f11c87662ca4e5
1b9e20ce15276b60be3666db10043cee1eb06ecf
同样也可以查看到应用中的http服务、hsf服务信息:
e6a419b4c3d961c1d3c45bb0e262bf45b8a9ba13
服务链路验证
通过链路监控,可以很直观的监控到整个业务调用的状态,及时的定位到问题出现的地方
647baf8d65e2973d200289816798f74524c71de9 3c08183d78c236b41b25a6d890075c2a34470da9


好了,一套简单的分布式应用系统就开发完成了,so easy!X公司的故事,也不出意外的迎来了happy ending。
相关实践学习
使用DAS实现数据库自动SQL优化
本场景介绍如何使用DAS实现数据库自动SQL优化。
SpringMVC框架入门
Spring MVC属于SpringFrameWork的后续产品,已经融合在Spring Web Flow里面。Spring 框架提供了构建 Web 应用程序的全功能 MVC 模块。在使用Spring进行WEB开发时,可以选择使用Spring的SpringMVC框架或集成其他MVC开发框架,如Struts2等。 相关的阿里云产品企业级分布式应用服务 EDAS:企业级分布式应用服务 EDAS(Enterprise Distributed Application Service)是一个应用托管和微服务管理的 PaaS 平台,提供应用开发、部署、监控、运维等全栈式解决方案,同时支持 Spring Cloud、Apache Dubbo(以下简称 Dubbo )等微服务运行环境,助力您的各类应用轻松上云。产品详情: https://www.aliyun.com/product/edas&nbsp;
相关文章
|
22天前
|
人工智能 文字识别 Java
SpringCloud+Python 混合微服务,如何打造AI分布式业务应用的技术底层?
尼恩,一位拥有20年架构经验的老架构师,通过其深厚的架构功力,成功指导了一位9年经验的网易工程师转型为大模型架构师,薪资逆涨50%,年薪近80W。尼恩的指导不仅帮助这位工程师在一年内成为大模型架构师,还让他管理起了10人团队,产品成功应用于多家大中型企业。尼恩因此决定编写《LLM大模型学习圣经》系列,帮助更多人掌握大模型架构,实现职业跃迁。该系列包括《从0到1吃透Transformer技术底座》、《从0到1精通RAG架构》等,旨在系统化、体系化地讲解大模型技术,助力读者实现“offer直提”。此外,尼恩还分享了多个技术圣经,如《NIO圣经》、《Docker圣经》等,帮助读者深入理解核心技术。
SpringCloud+Python 混合微服务,如何打造AI分布式业务应用的技术底层?
|
2月前
|
存储 NoSQL Java
分布式session-SpringSession的应用
Spring Session 提供了一种创建和管理 Servlet HttpSession 的方案,默认使用外置 Redis 存储 Session 数据,解决了 Session 共享问题。其特性包括:API 及实现用于管理用户会话、以应用容器中性方式替换 HttpSession、简化集群会话支持、管理单个浏览器实例中的多个用户会话以及通过 headers 提供会话 ID 以使用 RESTful API。Spring Session 通过 SessionRepositoryFilter 实现,拦截请求并转换 request 和 response 对象,从而实现 Session 的创建与管理。
分布式session-SpringSession的应用
|
2月前
|
存储 NoSQL Java
分布式session-SpringSession的应用
Spring Session 提供了一种创建和管理 Servlet HttpSession 的方案,默认使用外置 Redis 存储 Session 数据,解决 Session 共享问题。其主要特性包括:提供 API 和实现来管理用户会话,以中立方式替换应用程序容器中的 HttpSession,简化集群会话支持,并在单个浏览器实例中管理多个用户会话。此外,Spring Session 允许通过 headers 提供会话 ID 以使用 RESTful API。结合 Spring Boot 使用时,可通过配置 Redis 依赖和支持缓存的依赖实现 Session 共享。
分布式session-SpringSession的应用
|
29天前
|
缓存 网络协议 API
分布式系统应用之服务发现!
分布式系统应用之服务发现!
|
2月前
|
存储 运维 应用服务中间件
阿里云分布式存储应用示例
通过阿里云EDAS,您可以轻松部署与管理微服务应用。创建应用时,使用`CreateApplication`接口基于模板生成新应用,并获得包含应用ID在内的成功响应。随后,利用`DeployApplication`接口将应用部署至云端,返回&quot;Success&quot;确认部署成功。当业务调整需下线应用时,调用`ReleaseApplication`接口释放资源。阿里云EDAS简化了应用全生命周期管理,提升了运维效率与可靠性。[相关链接]提供了详细的操作与返回参数说明。
|
2月前
|
Dubbo Java 应用服务中间件
分布式(基础)-RMI简单的应用
分布式(基础)-RMI简单的应用
|
3月前
|
机器学习/深度学习 分布式计算 PyTorch
大规模数据集管理:DataLoader在分布式环境中的应用
【8月更文第29天】随着大数据时代的到来,如何高效地处理和利用大规模数据集成为了许多领域面临的关键挑战之一。本文将探讨如何在分布式环境中使用`DataLoader`来优化大规模数据集的管理与加载过程,并通过具体的代码示例展示其实现方法。
148 1
|
3月前
|
开发者 云计算 数据库
从桌面跃升至云端的华丽转身:深入解析如何运用WinForms与Azure的强大组合,解锁传统应用向现代化分布式系统演变的秘密,实现性能与安全性的双重飞跃——你不可不知的开发新模式
【8月更文挑战第31天】在数字化转型浪潮中,传统桌面应用面临新挑战。本文探讨如何融合Windows Forms(WinForms)与Microsoft Azure,助力应用向云端转型。通过Azure的虚拟机、容器及无服务器计算,可轻松解决性能瓶颈,满足全球用户需求。文中还提供了连接Azure数据库的示例代码,并介绍了集成Azure Storage和Functions的方法。尽管存在安全性、网络延迟及成本等问题,但合理设计架构可有效应对,帮助开发者构建高效可靠的现代应用。
31 0
|
3月前
|
UED 存储 数据管理
深度解析 Uno Platform 离线状态处理技巧:从网络检测到本地存储同步,全方位提升跨平台应用在无网环境下的用户体验与数据管理策略
【8月更文挑战第31天】处理离线状态下的用户体验是现代应用开发的关键。本文通过在线笔记应用案例,介绍如何使用 Uno Platform 优雅地应对离线状态。首先,利用 `NetworkInformation` 类检测网络状态;其次,使用 SQLite 实现离线存储;然后,在网络恢复时同步数据;最后,通过 UI 反馈提升用户体验。
80 0
|
3月前
|
机器学习/深度学习 TensorFlow 数据处理
分布式训练在TensorFlow中的全面应用指南:掌握多机多卡配置与实践技巧,让大规模数据集训练变得轻而易举,大幅提升模型训练效率与性能
【8月更文挑战第31天】本文详细介绍了如何在Tensorflow中实现多机多卡的分布式训练,涵盖环境配置、模型定义、数据处理及训练执行等关键环节。通过具体示例代码,展示了使用`MultiWorkerMirroredStrategy`进行分布式训练的过程,帮助读者更好地应对大规模数据集与复杂模型带来的挑战,提升训练效率。
67 0

热门文章

最新文章