开发者看这里|OceanBaseDev Meetup#1 上海站「深入分布式数据库」

本文涉及的产品
RDS AI 助手,专业版
RDS MySQL DuckDB 分析主实例,集群系列 4核8GB
RDS MySQL DuckDB 分析主实例,基础系列 4核8GB
简介: 9月20日,外滩大会预热场 — OceanBaseDev Meetup 分布式数据库开发者专场来啦~

近几年,越来越多的传统企业面临互联网化,IOT、区块链、AI、5G 等技术也在高速发展,任何一个技术的推广到成熟都会带来数据量的指数级增长,都会对存储带来巨大的冲击。相信随着这些技术的突破,未来越来越多的核心场景会走向分布式的领域。国内很多团队也在进行分布式数据库的探索与实践。

INCLUSION·外滩大会——9月25日「数据库,新标杆,新征途」数据库专场,汇聚众多蚂蚁集团及数据库行业资深专家、学界泰斗及行业意见领袖进行专题演讲。

OceanBaseDev Meetup 是以城市站展开的数据库技术交流活动,旨在为关注分布式数据库技术的同学提供技术交流、分享、探讨的空间与平台。如果你相信「分布式」是未来,如果你觉得「数据库」也很酷,欢迎加入 OceanBase Developer 社区,与志趣相投的朋友一起做点有意思的事。

9月20日,外滩大会预热场 — OceanBaseDev Meetup 分布式数据库开发者专场来啦~

本期分享邀请蚂蚁集团 OceanBase 团队的三位核心研发专家以及网易杭研资深研发工程师,针对分布式数据库的分布式事务以及落地实践展开分享。现场更有外滩大会门票等你来拿

活动基本信息

主题:OceanBaseDev Meetup#1 上海站「深入分布式数据库:事务·高可用·云原生」

时间:2020年9月20日(周日)13:00-17:30

地点:上海市杨浦区政学路77号 InnoSpace+

你将收获:

分布式数据库中事务并发控制的各种实现方案;

常见的数据库事务原子性和持久性面临的问题及解决方案;

数据库系统对高可用的需求及实现原理;

OceanBase 分布式事务并发控制、事务故障恢复及高可用的实现方案;

MySQL MGR 的实现原理及网易对 MGR 的落地实践;

报名方式:戳链接 https://tech.antfin.com/community/activities/1283 锁定席位

活动议程

无QR.jpg

议题介绍

出品人
杨传辉(花名:日照)蚂蚁集团研究员、OceanBase 总架构师,《大规模分布式存储系统:原理与实践》作者,对分布式系统的理论和工程实践有深刻理解,曾在百度作为核心成员参与类 MapReduce 系统、类 Bigtable 系统和百度分布式消息队列等底层基础设施架构工作。热衷于分布式存储和计算系统设计,乐于分享,有技术博客 NosqlNotes。

本期出品人
韩富晟(花名:颜然)蚂蚁集团资深技术专家,OceanBase 初创成员之一,OceanBase 分布式事务研发负责人,负责事务引擎以及性能优化相关的研发工作。

《深入解析分布式事务 - 事务并发控制的思考与实现》
嘉宾介绍
萧石,蚂蚁集团高级技术专家,2014年加入蚂蚁集团 OceanBase 数据库团队,参与了 OceanBase 1.0 及 OceanBase 2.0 的设计开发工作,目前主要负责 OceanBase 分布式事务的设计开发及性能优化。

议题简介
本次主要介绍分布式数据库中,事务并发控制面临的挑战以及目前关于事务并发控制的解决方案,分析各解决方案的实现,并结合 OceanBase 1.0 及 OceanBase 2.0的开发实践,详细介绍 OceanBase 分布式事务并发控制实现方案以及背后的思考。

听众收获

了解分布式数据库中事务并发控制的各种实现方案;

了解 OceanBase 的分布式事务框架;

了解 OceanBase 分布式事务并发控制的实现;

《深入解析分布式事务 - 事务故障恢复的原理与实践》
嘉宾介绍
景严,蚂蚁集团技术专家,2016年加入 OceanBase 事务组,参与了 OceanBase 1.0 及 OceanBase 2.0版本的设计开发工作,目前主要负责 OceanBase 数据转储和宕机恢复相关的工作。

议题简介

本次分享主要介绍在数据库系统中单机和分布式场景下保证事务原子性及持久性的概念和解决方案,并结合OceanBase 自身的经验,介绍在 OceanBase 中保证分布式事务原子性和持久性的方法和背后的思考。

听众收获

理解数据库事务原子性和持久性面临的问题;

常见的单机及分布式数据库事务原子性和持久性解决方法;

Oceanbase事务故障恢复实践;

《深入解析分布式架构 - 基于 MGR 的 MySQL 云原生中间件在网易的实践》

嘉宾介绍
裘昕,网易杭州研究院资深研发工程师,8年开发经验,曾就职于华为,从事 SDN 软件相关的开发工作。2017年加入网易,负责网易数帆 RDS 平台的设计,开发以及维护工作。目前主要工作集中在 K8s,数据库(高可用,分布式,云原生)相关的技术栈上。

议题简介
近几年,K8s、Cloud Native 这两个概念正风驰电掣的渗透到各个行业领域中,越来越多的企业正在投入云原生的怀抱,而与此同时,MySQL 推出了一个更为自动化的集群高可用管理方案 MGR(MySQL Group Replication)。本次分享将主要探讨基于分布式架构 MGR 以及 K8s 的 RDS MySQL 云原生中间件的实现细节以及在网易的内部应用实践。

听众收获

MySQL MGR 的具体实现原理;

网易针对分布式架构 MGR 的优化;

MGR 在 K8s 中的实现架构以及实践;

《深入解析分布式事务 - 数据库高可用面临的挑战与解决之道》
嘉宾介绍
羡林,蚂蚁集团高级技术专家,2012年毕业于北京邮电大学计算机专业。2013年加入 OceanBase 团队,参与了OceanBase 1.0 及 2.0 版本的设计与开发,目前主要负责 OceanBase 高可用及一致性相关的工作。

议题简介
本次分享介绍数据库系统对高可用的需求,对比传统数据库的方案,介绍 OceanBase 作为分布式关系型数据库系统,在真实业务场景中所面临的挑战,实现方案以及背后的思考。

听众收获

业务发展对数据库系统高可用的需求;

传统数据库以及分布式数据库的解决方案;

OceanBase 在高可用上面临的挑战及方案;

相关实践学习
深入解析Docker容器化技术
Docker是一个开源的应用容器引擎,让开发者可以打包他们的应用以及依赖包到一个可移植的容器中,然后发布到任何流行的Linux机器上,也可以实现虚拟化,容器是完全使用沙箱机制,相互之间不会有任何接口。Docker是世界领先的软件容器平台。开发人员利用Docker可以消除协作编码时“在我的机器上可正常工作”的问题。运维人员利用Docker可以在隔离容器中并行运行和管理应用,获得更好的计算密度。企业利用Docker可以构建敏捷的软件交付管道,以更快的速度、更高的安全性和可靠的信誉为Linux和Windows Server应用发布新功能。 在本套课程中,我们将全面的讲解Docker技术栈,从环境安装到容器、镜像操作以及生产环境如何部署开发的微服务应用。本课程由黑马程序员提供。     相关的阿里云产品:容器服务 ACK 容器服务 Kubernetes 版(简称 ACK)提供高性能可伸缩的容器应用管理能力,支持企业级容器化应用的全生命周期管理。整合阿里云虚拟化、存储、网络和安全能力,打造云端最佳容器化应用运行环境。 了解产品详情: https://www.aliyun.com/product/kubernetes
相关文章
|
9月前
|
存储 监控 分布式数据库
ClickHouse分布式数据库动态伸缩(弹性扩缩容)的实现
实现ClickHouse数据库的动态伸缩需要持续的维护和精细的操作。从集群配置到数据迁移,再到监控和自动化,每一步都要仔细管理以确保服务的可靠性和性能。这些活动可以显著提高应用的响应性和成本效率,帮助业务根据实际需求灵活调整资源分配。
477 10
|
10月前
|
存储 关系型数据库 分布式数据库
【赵渝强老师】基于PostgreSQL的分布式数据库:Citus
Citus 是基于 PostgreSQL 的开源分布式数据库,采用 shared nothing 架构,具备良好的扩展性。它以插件形式集成,部署简单,适用于处理大规模数据和高并发场景。本文介绍了 Citus 的基础概念、安装配置步骤及其在单机环境下的集群搭建方法。
873 2
|
关系型数据库 MySQL 数据库
开发者如何使用数据库文件存储 DBFS
【10月更文挑战第10天】开发者如何使用数据库文件存储 DBFS
447 5
|
SQL 关系型数据库 MySQL
乐观锁在分布式数据库中如何与事务隔离级别结合使用
乐观锁在分布式数据库中如何与事务隔离级别结合使用
|
12月前
|
SQL 存储 分布式数据库
分布式存储数据恢复—hbase和hive数据库数据恢复案例
分布式存储数据恢复环境: 16台某品牌R730xd服务器节点,每台服务器节点上有数台虚拟机。 虚拟机上部署Hbase和Hive数据库。 分布式存储故障: 数据库底层文件被误删除,数据库不能使用。要求恢复hbase和hive数据库。
432 12
|
存储 运维 OLAP
【Meetup回顾 第1期】竟是这样的国产数据库,YashanDB技术内幕曝光
YashanDB是一款基于统一内核,支持单机/主备、共享集群、分布式等多种部署方式,覆盖OLTP/HTAP/OLAP交易和分析混合负载场景的新型数据库系统;YashanDB同时提供开发平台、运维平台和迁移平台3大工具平台以满足数据全生命周期管理。
183 2
【Meetup回顾 第1期】竟是这样的国产数据库,YashanDB技术内幕曝光
|
SQL 运维 关系型数据库
体验用分布式数据库突破资源瓶颈,完成任务领智能台灯!
体验用分布式数据库突破资源瓶颈,完成任务领智能台灯!
|
SQL 数据建模 BI
【YashanDB 知识库】用 yasldr 配置 Bulkload 模式作单线程迁移 300G 的业务数据到分布式数据库,迁移任务频繁出错
问题描述 详细版本:YashanDB Server Enterprise Edition Release 23.2.4.100 x86_64 6db1237 影响范围: 离线数据迁移场景,影响业务数据入库。 外场将部分 NewCIS 的报表业务放到分布式数据库,验证 SQL 性能水平。 操作系统环境配置: 125G 内存 32C CPU 2T 的 HDD 磁盘 问题出现的步骤/操作: 1、部署崖山分布式数据库 1mm 1cn 3dn 单线启动 yasldr 数据迁移任务,设置 32 线程的 bulk load 模式 2、观察 yasldr.log 是否出现如下错
|
容灾 关系型数据库 分布式数据库
PolarDB分布式版:与云融合的分布式数据库发展新阶段
PolarDB分布式版标志着分布式数据库与云融合的新阶段。它经历了三个发展阶段:从简单的分布式中间件,到一体化分布式架构,再到云原生分布式数据库。PolarDB充分利用云资源的弹性、高性价比、高可用性和隔离能力,解决了大规模数据扩展性问题,并支持多租户场景和复杂事务处理。零售中台的建设背景包括国家数字化转型战略及解决信息孤岛问题,采用分布式数据库提升高可用性和性能,满足海量订单处理需求。展望未来,零售中台将重点提升容灾能力、优化资源利用并引入AI技术,以实现更智能的服务和更高的业务连续性。
456 9