2022云栖精选—云数据库RDS重磅功能发布与最佳实践

简介: 彭祥阿里云数据库事业部资深技术专家RDS产品部负责人许鸿斌阿里云数据库事业部高级产品专家

lQLPJxbcF2cqNBvMiM0FeLCMz4ifcSGHeANpqgFLAEAA_1400_136.png

一、整体介绍

image.png

阿里云RDS伴随着阿里云的成长而成长,经历了不同发展阶段,从最初脚本运营方式发展到平台化、商业化。在产品能力上逐步支持了 OpenAPI PostgreSQLSQLServer等多引擎

阿里云RDS在过去几年中经历了智能化演进,比如通过DAS的机器学习能力支撑智能决策,通过性能参数MySQL治理等提升引擎产品能力。2021,阿里云RDS进行了架构升级全向原生演进,充分将阿里云底层IaaS资源服务能力通过PaaS服务进行透传。并在此基础上进行了创新,包括ServerlessECS

image.png

阿里云RDS从过去基于物理机隔离的架构逐步朝着All On Ecs的方向演进,将PaaS产品能力构建IaaS资源服务能力上,再基于 ECS 以及ESSD实现存算分离架构进行资源解耦,产品能力带来极大的提升,比如可基于快照秒级恢复以及计算存储独立扩容和缩容的能力

在计算存储分离架构基础之上,构建了基于K8s集群调度系统,将引擎产品容器化部署到ECS服务器上。

在分层管控架构之上,我们构建自己Serverless产品能力。使用统一管控架构支撑四款不同产品,包括 MySQLPostgreSQLMariaDB以及SQL Server除了硬核技术以外,我们也通过多种产品能力帮助开发人员提高开发效率。


二、产品趋势及技术解读

image.png

数据库在传统的RDS阶段,计算节点存储容量都需要预设比如通过运维人员根据业务需求进行手动配置,计算规格有限,严重限制了业务开发人员的开发效率以及 DBA 运维效率。

云原生 RDS 能够利用DAS产品进行智能化调度,智能化预测产品或用户业务需要多少资源量,可以自动进行伸缩

RDS Serverless1.02.0阶段希望客户无需关心资源计算规格存储容量都够随着业务量发展进行扩缩容

image.png

传统 RDS 架构运维人员需要根据业务的波峰波谷进行手动扩缩容,难以精准预计,极易出现资源浪费或资源储备不够的情况。同时,传统 RDS 架构下,资源伸缩的范围有限,无法完全满足业务需求。

而在Serverless架构下,计算规格存储容量能够随着业务波峰和波谷进行弹升弹降极大提升了运维人员的工作效率。同时,可以对资源进行更精细化、更准确的配置,节约大量成本。

image.png

RDS Servereless产品为业务带来了以下核心竞争优势:

第一,资源配置可随着业务负载实现秒级弹性伸缩。

第二,按需使用,按量计费。

第三,构建在内核功能创新之上,实现了内核BP Online Resize优化,弹得更稳

第四,支持 RESTful API 访问机制。只需一个endpoint即可通过RestAPI HTTP 协议进行访问和操作,配置数据库资源。

image.png

我们实现了RDS On倚天ECS,包括底层 CPU 构、ECS 机器,到上层数据库全栈资源,并实现了软硬协同优化使得RDS On倚天ECS性能稳定性等各个方技术指标看齐并超越最新一代的X86机型平均性能提升10%,性价比提升25%,并实现了0成本的应用适配。

image.png

从过去的RDS迁移到ECS架构存在大量稳定性问题,需要持续不断创新深度优化才能使新架构的产品竞争力看齐过去物理机形态的能力

我们对Binlog体系进行了改造,实现了Binlog In Redo模式,原先事务提交commit两次IO操作降为一次,大幅提升写操作吞吐同时,对Binlog的写模式也进行了深入调整。

RTO 是众多数据库使用者最关心核心指标。 RDS产品过去在RTO上做了大量优化。比如大事务Recovery优化,从过去的需要小时级降至秒级;同时,对Buffer Pool进行了并行初始化优化,提升RTO指标,对Reo核心组件进行了深度优化,提升产品能力。


三、产品功能发布

image.png

我们一直在思考,能否有这样一种产品形态,既能够兼顾实例的整体可用性,同时又能够最大范围实现降本增效。因此,阿里云出了RDS MySQL的新形态——RDS MySQL集群版。

集群版相比之前高可能架构存在两点颇为明显变化。

第一,集群版支持同时挂载多个节点,这意味着会有多个备库,同时所有备将开放给业务访问实现资源最大化利用,降低成本

第二,集群版不仅提供了最高49全球最高等级SLA服务保障,同时还通过内置MySQL主复制技术结合内置Paxos分布式协议算法,确保数据多点性,确保数据永不丢失。

以最小成本实现数据服务可用性以及数据可靠性最高级别保障,是 RDS MySQL集群版最大竞争力

image.png

RDS通过一系列产品功能矩阵,实现整体业务降本增效。

在计算节点上,支持了基础版的只读实例,针对有明显使用时间的业务,在业务停用之后可以同步暂停RDS实例实例期间不收取任何计算节点费用,需要时又可以快速将它拉起用于生产业务。

存储节点部分也进行了核心优化。依赖云盘能力支持了从PL0PL3全等级云盘矩阵,同时可以根据线上业务吞吐需求,在PL0PL3之间随时进行无损在线变化。

存储流量层通过数据库内部核心技术实现了云盘缩容能力,可以根据业务数据量变化实现云盘存储空间分配以及降本。

不论是计算节点实例暂停还是存储节点可升可降,我们始终希望业务不同阶段可以在RDS上获得最优的资源成本解决方案。

image.png

RDS与数据库备份产品DBS深度集成之后推出新特性:急速备份及恢复能力。数据库物理备份中,往往会涉及到跨存储介质的数据传输以及恢复耗时耗力。而通过RDS极速备份及恢复能力,可以实现对全量及增量物理备份和文件实时自动合成快照备份。进行数据恢复时,可以通过快照秒级挂载实现数据的快速恢复,大幅度缩短数据恢复时长。此前恢复1T数据大约需要4小时,而现在仅需30分钟,数据效率恢复提升达88%

同时也支持了针对单库单级别恢复能力,该能力可大范围应用在诸如游戏多租户,需要单库单表回档场景,让线上业务以最快速度回到正确状态。

image.png

RDS的可观测性体验也得到了增强。首先提升了更多资源监控指标,客户可以针对RDS实例进行更全面的掌控。其次支持了全局视角自定义监控大盘可以根据多实例、多时间点多监控进行数据聚集、展示以及对比分析。

针对最为常用的指标比如资源、空间、链接、SQL 支持定期常态化自动巡检,会定期给出报告,发布告警,用户可对全局运行状态实现全面掌控。

image.png

PostgreSQL被誉为全球最先进开源数据库,而RDS PostgreSQL通过插件能力扩展了其使用场景。我们发布了Ganos时空引擎插件,可应用在高新地图路径规划场景发布了全加密数据库插件,可以实现从内存到磁盘全链路最高等级加密发布了PASE高维项目插件,可应用于图像识别、 AI 机器人等场景发布了Babelfish插件可以实现对SQL Server数据库兼容以及对商业数据库替换。

以上插件能力加持使得RDSAI时空加密等场景上具备了更好为业务提供服务基础能力。


四、最佳实践

image.png

从线上真实数据可以看到Serverless已经广泛应用资源波动具备不确定性负载场景中,比如运维及开发环境、IDC到云上容灾环境、音视频不定时转码多人在线协同办公系统等。以上场景均具备一个共同特征业务间断不连续但在业务高峰期对数据库性能有着极高要求。

RDS Serverless通过秒极弹升、按需付费能力,可以很好地满足此类场景的需求。在业务低峰,可以保持在较低水位线运行,而在业务高峰到来时,又可以快速弹升以应对业务流量。大幅降低了资源成本,最高降本70%真正实现了增效并且降本。

image.png

Babelfish具备了SQL Server商业引擎语法兼容能力。在RDS启用Babelfish插件之后,可通过SQL Server语法以及 PG语法同时对数据库进行访问,以开源数据库引擎能力以及成本实现商户数据库引擎能力,进而将商业数据SQL Server替换,使得数据库采购成本下降 60%-70%

image.png

RDS砥砺前行,经历了十年发展之后,无论是从最底层协同一体化,还是数据库最核心内核优化,亦或是最上层集群MySQL形态推出,始终致力于让每一个客户获得更快、更稳、更安全、更好用数据库使用体验。

lQLPJxbcF2cqM2TM-M0CnrCgW_7LDpyh1wNpqgFKAPsA_670_248.png

相关实践学习
每个IT人都想学的“Web应用上云经典架构”实战
本实验从Web应用上云这个最基本的、最普遍的需求出发,帮助IT从业者们通过“阿里云Web应用上云解决方案”,了解一个企业级Web应用上云的常见架构,了解如何构建一个高可用、可扩展的企业级应用架构。
MySQL数据库入门学习
本课程通过最流行的开源数据库MySQL带你了解数据库的世界。   相关的阿里云产品:云数据库RDS MySQL 版 阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。 了解产品详情: https://www.aliyun.com/product/rds/mysql 
相关文章
|
2月前
|
SQL 人工智能 关系型数据库
AI Agent的未来之争:任务规划,该由人主导还是AI自主?——阿里云RDS AI助手的最佳实践
AI Agent的规划能力需权衡自主与人工。阿里云RDS AI助手实践表明:开放场景可由大模型自主规划,高频垂直场景则宜采用人工SOP驱动,结合案例库与混合架构,实现稳定、可解释的企业级应用,推动AI从“能聊”走向“能用”。
889 39
AI Agent的未来之争:任务规划,该由人主导还是AI自主?——阿里云RDS AI助手的最佳实践
|
2月前
|
SQL 关系型数据库 MySQL
阿里云RDS云数据库全解析:产品功能、收费标准与活动参考
与云服务器ECS一样,关系型数据库RDS也是很多用户上云必买的热门云产品之一,阿里云的云数据库RDS主要包含RDS MySQL、RDS SQL Server、RDS PostgreSQL、RDS MariaDB等几个关系型数据库,并且提供了容灾、备份、恢复、监控、迁移等方面的全套解决方案,帮助您解决数据库运维的烦恼。本文为大家介绍阿里云的云数据库 RDS主要产品及计费方式、收费标准以及活动等相关情况,以供参考。
|
10月前
|
存储 NoSQL 关系型数据库
PolarDB开源数据库进阶课17 集成数据湖功能
本文介绍了如何在PolarDB数据库中接入pg_duckdb、pg_mooncake插件以支持数据湖功能, 可以读写对象存储的远程数据, 支持csv, parquet等格式, 支持delta等框架, 并显著提升OLAP性能。
732 2
|
5月前
|
SQL 存储 关系型数据库
MySQL功能模块探秘:数据库世界的奇妙之旅
]带你轻松愉快地探索MySQL 8.4.5的核心功能模块,从SQL引擎到存储引擎,从复制机制到插件系统,让你在欢声笑语中掌握数据库的精髓!
195 26
|
11月前
|
Cloud Native 关系型数据库 分布式数据库
让PolarDB更了解您--PolarDB云原生数据库核心功能体验馆
让PolarDB更了解您——PolarDB云原生数据库核心功能体验馆,由阿里云数据库产品事业部负责人宋震分享。内容涵盖PolarDB技术布局、开源进展及体验馆三大部分。技术布局包括云计算加速数据库演进、数据处理需求带来的变革、软硬协同优化等;开源部分介绍了兼容MySQL和PostgreSQL的两款产品;体验馆则通过实际操作让用户直观感受Serverless、无感切换、SQL2Map等功能。
408 7
|
7月前
|
存储 缓存 自然语言处理
评论功能开发全解析:从数据库设计到多语言实现-优雅草卓伊凡
评论功能开发全解析:从数据库设计到多语言实现-优雅草卓伊凡
213 8
评论功能开发全解析:从数据库设计到多语言实现-优雅草卓伊凡
|
8月前
|
人工智能 运维 关系型数据库
云服务API与MCP深度集成,RDS MCP最佳实践
近日,阿里云数据库RDS发布开源RDS MCP Server,将复杂的技术操作转化为自然语言交互,实现"对话即运维"的流畅体验。通过将RDS OpenAPI能力封装为MCP协议工具,用户只需像聊天一样描述需求,即可完成数据库实例创建、性能调优、故障排查等专业操作。本文介绍了RDS MCP(Model Context Protocol)的最佳实践及其应用,0代码,两步即可轻松完成RDS实例选型与创建,快来体验!
云服务API与MCP深度集成,RDS MCP最佳实践
|
9月前
|
SQL Linux 数据库
【YashanDB知识库】崖山数据库Outline功能验证
本文来自YashanDB官网,主要测试了数据库优化器在不同场景下优先使用outline计划的功能。测试环境包括相同版本新增数据、绑定参数执行、单机主备架构以及数据库版本升级等场景。通过创建表、插入数据、收集统计信息和创建outline等步骤,验证了在各种情况下优化器均能优先采用存储的outline计划。测试结果表明,即使统计信息失效或数据库版本升级,outline功能依然稳定有效,确保查询计划的一致性和性能优化。详情可见[原文链接](https://www.yashandb.com/newsinfo/7488286.html?templateId=1718516)。
【YashanDB知识库】崖山数据库Outline功能验证
|
9月前
|
NoSQL 关系型数据库 MongoDB
Apifox与Apipost数据库连接功能详细对比,让接口管理更高效!
在现代软件开发中,数据库是应用运行的核心组件,接口管理工具则是连接和调试数据库的重要桥梁。本文对比了 Apifox 和 Apipost 两款工具的数据库连接功能。Apipost 支持全面的关系型与非关系型数据库(如 MySQL、Redis、MongoDB),功能强大且免费,适合复杂项目;而 Apifox 在关系型数据库支持上表现良好,但非关系型数据库(尤其是 Redis)功能有限且收费,更适合中小项目以关系型数据库为主的需求。根据项目需求选择合适的工具,可显著提升开发效率和稳定性。
|
9月前
|
数据库连接 PHP 数据库
【YashanDB知识库】PHP使用ODBC使用数据库绑定参数功能异常
【YashanDB知识库】PHP使用ODBC使用数据库绑定参数功能异常

相关产品

  • 云数据库 RDS MySQL 版
  • 云数据库 RDS
  • 推荐镜像

    更多