PolarDB PostgreSQL 版

PolarDB PostgreSQL版 Serverless弹性&价格力观测

数据库做机器学习和深度学习有若干技术路线？关于红极一时的 chatGPT有什么看法？数据库能否做 NLP ？Postgresql 在深度学习、人工智能领域能承担起哪些应用？本期开源面对面节目，阿里云数据库开源首席架构师于巍携手PolarDB机器学习框架SIG核心成员、pg4ml 框架作者郭铁成，与你探讨分享数据库技术与机器学习融合的一些思考和实践。

本次沙龙是PostgreSQL中文社区与阿里云数据库开源团队联合主办的。PostgreSQL生态技术沙龙,旨在推动PG的用户交流,分享最新热门的数据库技术,包括阿里云开源的PolarDBforPG共享存储版本如何实现类似Oracle的RAC架构?PG如何支持DirectIO?PG的内核学习方法等.大咖云集,欢迎报名参加.2021年10月30日（12:00~18:00）杭州市滨江区长河路中控信息B座1708活动嘉宾及议题曲山阿里云数据库开源负责人介绍沙龙目标, KOL、SIG、开源计划, 开源的使命.唐成杭州乘数科技CTO、PG社区常委, 内核专家PostgreSQL DirectIO开发实践北侠阿里巴巴数据库内核领域专家PolarDB PG 架构介绍与源码贡献圆珠阿里巴巴数据库分布式存储领域专家PolarDB PG分布式共享存储层原理蟾兔阿里巴巴数据库云原生领域专家PolarDB Stack 管控平台最佳实践朱贤文成都文武科技CTO、PG社区常委, 内核专家PolarDB on 鸿鹄吕海波杭州美创科技数据库内核专家、PG内核专家PostgreSQL Non-FPW开发实践

为了让学员的学考更有针对性，本次特邀CUUG首席讲师陈卫星老师（Oracle 10g/11g OCM、PostgreSQL PGCM证书获得者，PolarDB 开源人才初级课程金牌讲师）为您答疑解惑，陈老师目前总共分享过200多场数据库相关技术公开课，此次公开课将对比PolarDB与其它国产数据库的技术特点，分享PolarDB 开源人才初级考试秘笈，助您顺利通过考试。

《PolarDB高性能数据库一体机解决方案》，主讲人：中启乘数科技创始人唐成。CData是一款高性能数据库云产品平台，支持高可用、高性能、水平拓展等特性。CData搭载PolarDB将发挥出极致的性能优势。

PolarDB-PG 提供了 Shared Server 内置连接池功能，实现了用户连接与后端进程的解绑。从根本上解决了高并发或者大量短连接带来的性能、稳定性问题。本期分享将会介绍Shared Server的基本原理以及特性，并演示开启Shared Server后的性能对比分析。

大咖云集，燃爆夏日。8月5日，由PostgreSQL中文社区、阿里云PolarDB开源社区、蚂蚁OceanBase开源社区联合举办的开源数据库技术沙龙在杭州召开。 CUUG负责人、PG中文社区委员、Oracle金牌讲师陈卫星为大家带来主题分享《Oracle VS PostgreSQL/PolarDB功能大比拼》。他从实例结构、数据库体系架构、备份恢复、性能调优、高可用解决方案五个方面进行了对比分享。他说，在PolarDB的体系架构中，计算节点和存储节点分离，存储节点有优势，也就是共享存储。随着用户业务数据量越来越大，业务越来越复杂，传统数据库系列面临巨大挑战，PolarDB 在技术上做了很多优化，如只复制Meta、页面回放优化、DDL锁回放优化，通过这些技术上的突破，极大的降低了复制延迟，实现了读写分离、高可用和稳定性。

开源生态的繁荣，离不开各位开发者的力量。为了帮助更多开发者感受到开源社区的魅力，了解到如何更快的参与开源社区，PolarDB开源社区推出《开源贡献新手指南系列》，本节课程将手把手教学PolarDB-PG/PolarDB-X两大开源项目完整的PR提交过程，即便你不懂编程或代码，也能成为开源贡献者，通过参与开源社区贡献获得自身成长。

《Ganos: A Multidimensional, Dynamic, and Scene-Oriented Cloud-Native Spatial Database Engine》介绍了空天数据库引擎Ganos背后的系统设计，分析了对地观测、数字孪生等新技术浪潮背景下多维、动态、场景化新型空间多模态数据的挑战，自底向上提出了低成本高可用对象存储扩展、空间/时空/网格新型数据类型与模型体系、多维索引访问方法和空间多级并行查询与优化整体框架。Ganos加持PolarDB数据库，使之成为业界首个具备云原生空间数据引擎，且最早系统性支持移动对象和3D场景数据处理能力的商业化数据库。

是什么让客户代表喊出了“国货之光”？来「开源人说」数据库PolarDB专场直播揭晓答案！5位阿里云数据库超级大咖、10位阿里云数据库开源生态伙伴嘉宾 、数十位业内资深开发者在现场进行了深度交流。

本系列课程将面向DBA、高校学生、内核爱好者，分15个章节，系统化介绍PG核心技术原理、用法和代码实现。希望通过课程学习，让没有内核经验的同学和DBA，也可以进行简单的特性开发，更深入理解PG配置和运行原理。本节课将讲述 PostgreSQL 索引基本介绍、B-Tree 索引、Hash 索引、GiS T索引、GIN 索引、TSearch2 全文搜索等内容。

阿里云 ESSD 云盘结合 25 GE 网络和 RDMA 技术，能够提供单盘高达 100 万的随机读写能力和单路低时延性能，同时支持多重挂载在多个 ECS 实例上。本期开源学堂将演示使用一个 ESSD 云盘作为共享存储多重挂载到两个 ECS 实例上，并分别在两个 ECS 实例上部署 PolarDB-PG 节点组成集群。同时简析部署准备过程中的技术原理。讲师/嘉宾简介棠羽，阿里云 PolarDB-PG 云原生数据库内核开发工程师，毕业于南京航空航天大学计算机学院。2022 年加入 PolarDB-PG 团队，主要负责 HTAP 和分布式执行层的研发工作。

10月15日，PolarDB 和 Curve 两大开源社区于杭州联合举办线下 Meetup，活动邀请到了来自阿里云、网易数帆、乘数科技的资深技术专家，为大家带来 PolarDB-PG、PolarDB-X 及 Curve 三大开源项目的最佳实践及生态合作案例。

PolarDB for PostgreSQL是开源分布式云原生数据库, 采用计算存储分离架构, 本期视频介绍了PolarDB PG如何从架构层面解决PG单机版的高并发、HTAP、读写分离延迟等痛点讲师简介花名: 北侠 title: 阿里云高级技术专家个人介绍: 深度参与PolarDB项目从零构建的过程，负责过PolarStore分布式存储一致性协议的研发和元数据管理的研发，现负责PolarDB PostgreSQL的HTAP系统的业务和研发。

大咖云集，燃爆夏日。8月5日，由PostgreSQL中文社区、阿里云PolarDB开源社区、蚂蚁OceanBase开源社区联合举办的开源数据库技术沙龙在杭州召开。 武汉大学计算机学院博士彭煜玮老师，为我们分享了武汉大学在国产数据库研制人才培养方面的经验。彭老师向大家介绍了武汉大学计算机学院本科学生的组成、数据库主干课程和支线课程的设置，重点从数据库使用、应用开发和数据库内核开发两个方面分享了国产/开源数据库在武汉大学数据库教学中应用的实践，举例讲解了与OceanBase和PolarDB的项目合作的一些细节和进展。

在5月12日PolarDB开源社区温州线下沙龙中，北京神脑资讯技术有限公司总裁陈卫星发布了《PolarDB高校工作组计划》，目前已经在多个高校开展工作，今年计划在近百所高校创建PolarDB开源数据库工作室，培养近万名PolarDB认证工程师。

《PolarDB数据库在AI时代下的应用与优势》，主讲人：阿里云数据库开源首席架构师郭良忠。随着AI大模型时代的到来，阿里云通过PolarDB数据库与AI场景的结合，帮助大家更好地了解和掌握PolarDB数据库+AI的相关知识和技能，进而在实际工作中更好地应用PolarDB数据库+AI一体化的思路解决业务新需求和新场景的融合，提高数据处理效率和竞争力。

在PolarDB & ScaleFlux meetup中，阿里云数据库开源首席架构师、PolarDB开源社区技术委员会副主席于巍进行了《助力企业降本增效-〈Serverless数据库技术研究报告〉解读》的分享，就《Serverless数据库技术研究报告》与 《数据库Serverless能力分级要求》进行了详细介绍。

作为阿里云PolarDB开源社区的生态伙伴，柏睿数据和PolarDB联手，根据产品的特殊点整合统一的解决方案，新方案融合数据湖和数据仓库成为一种新型的开放式数据平台架构，PolarDB做湖，RapidsDB做仓，将数据湖和数据仓库的优势充分结合，通过RapidsDB的federation能力构建在数据湖低成本的数据存储架构之上，又继承了数据仓库的数据处理、分析和管理功能。本次分享将详细介绍湖和仓的边界区分，业内的通用数据同步实现方案以及RapidsDB的技术特性。

随着业务的发展，当数据库的存储容量不能满足数据规模的增长时，需要对存储空间进行扩容，此过程中会因数据迁移而导致服务中断。本期开源学堂将演示对部署在共享存储上的 PolarDB-PG 集群进行不中断业务的在线扩容，同时简析部署流程背后的技术原理。

Curve 是网易开源的高性能、高可用、高可靠分布式存储系统，具备良好的扩展性，可应用于主流的云原生基础设施平台。本期开源学堂将演示如何使用 CurveBS 存储集群作为共享块存储底座，在多台 ECS 上部署 PolarDB-PG 共享存储数据库集群。同时简析部署流程背后的技术原理。

本系列课程将面向DBA、高校学生、内核爱好者，分15个章节，系统化介绍PG核心技术原理、用法和代码实现。希望通过课程学习，让没有内核经验的同学和DBA，也可以进行简单的特性开发，更深入理解PG配置和运行原理。本节课将讲述PostgreSQL的存储管理，涵盖磁盘管理（Storage Managers、VFD）、 空闲空间映射表（FSM）、可见性映射表（VM）、内存管理等内容。讲师/嘉宾简介漠雪，13年数据库内核开发和架构设计经验，从无到有参与PolarDB、GaussDB等多款数据库系列产品的内核架构设计和开发，多年美国、以色列等海外研发经验，了解数据库行业技术趋势、PG和MySQL内核技术及海外社区运作等。目前主要负责横向拉通阿里云数据库各产品通用技术和架构演进，标准化，开源技术等工作。

本系列课程将面向 DBA、高校学生、内核爱好者，分15章节，系统化介绍 PostgreSQL 核心技术原理、用法和代码实现。希望通过课程学习，让没有内核经验的同学和 DBA，也可以进行简单的特性开发，更深入理解PostgreSQL 配置和运行原理。本节课将讲述 PostgreSQL 的体系架构，涵盖系统表，初始化、启动、查询流程，辅助进程等内容。讲师/嘉宾简介漠雪，13年数据库内核开发和架构设计经验，从无到有参与PolarDB、GaussDB等多款数据库系列产品的内核架构设计和开发，多年美国、以色列等海外研发经验，了解数据库行业技术趋势、PG和MySQL内核技术及海外社区运作等。目前主要负责横向拉通阿里云数据库各产品通用技术和架构演进，标准化，开源技术等工作。

PolarDB的MPP跨机并行执行.讲师简介花名: 北侠 title: 阿里云高级技术专家个人简介: 深度参与PolarDB项目从零构建的过程，负责过PolarStore分布式存储一致性协议的研发和元数据管理的研发，现负责PolarDB PostgreSQL的HTAP系统的业务和研发。

PolarDB for PostgreSQL是开源的计算存储分离分布式数据库, 如何保障多个计算节点之间的数据一致性? 如何解决内存状态同步、未来页、过去页的问题?讲师简介花名: 北侠 title: 阿里云高级技术专家个人简介: 深度参与PolarDB项目从零构建的过程，负责过PolarStore分布式存储一致性协议的研发和元数据管理的研发，现负责PolarDB PostgreSQL的HTAP系统的业务和研发。

闪回表(Flashback Table) 功能是PolarDB-PG数据库高可用的一个重要特性，支持在数据人为误操作时，快速闪回到某个时间点，恢复以及查看丢失的数据。本期分享将会介绍闪回表、闪回日志的基本原理以及特性，并演示闪回功能的使用方法。

在7月29日PolarDB开源社区南京沙龙中，中启乘数科技创始人唐成分享了《从SQL Server、Oracle迁移到PolarDB的最佳实践》，介绍了PolarDB的产品优势与亮点，从业务需求角度出发，解决企业在数据迁移过程中遇到的痛点。

6月3日，由PostgreSQL中文社区和PolarDB开源社区联合举办的数据库技术沙龙（武汉站）圆满落幕！本次活动邀请到来自阿里云、成都文武，四维纵横，拓数派，斗鱼、武汉大学等多位资深技术专家与老师，这次技术交流活动围绕未来数据库展开讨论和分享。通过探讨未来数据库的概念和特点，了解未来数据库在数据管理、智能分析、数据驱动等领域的应用和机遇，为智能化时代的发展提供更多的支持和服务。

《AI 时代下的数据库变革》，主讲人：磐吉云数创始人CEO冯若航。在PolarDB开源社区温州沙龙冯若航为大家介绍了向量数据库以及与数据库自动驾驶领域的发展情况，分享了对于AI大模型在数据库领域的变革与思考。

在ScaleFlux & PolarDB meetup中，ScaleFlux 解决方案架构师董红禹进行了《透明压缩技术：数据库存储降本增效的软硬件协同方案》的分享，从数据计算存储的发展趋势、透明压缩技术原理与应用场景以及数据库的应用价值三个方面，为大家介绍了可计算存储在数据存储降本增效的应用与实践。

本系列课程将面向DBA、高校学生、内核爱好者，介绍PG内核架构、各模块基本原理、用法、代码实现。希望通过课程学习，让没有内核经验的同学和DBA，也可以进行简单的特性开发，更深入理解PG配置和运行原理。本课程包含15个章节，系统化介绍PG架构、SQL引擎、执行引擎、存储引擎、并发控制、HA、分布式等核心技术原理和代码实现。讲师/嘉宾简介漠雪，13年数据库内核开发和架构设计经验，从无到有参与PolarDB、GaussDB等多款数据库系列产品的内核架构设计和开发，多年美国、以色列等海外研发经验，了解数据库行业技术趋势、PG和MySQL内核技术及海外社区运作等。目前主要负责横向拉通阿里云数据库各产品通用技术和架构演进，标准化，开源技术等工作。

在PolarDB存储计算分离的架构基础上我们研发了基于共享存储的MPP架构步具备了HTAP的能力，对一套TP的数据支持两套执行引擎： 1. 单机执行引擎用于处理高并发的OLTP； 2. MPP跨机分布式执行引擎用于复杂的OLAP查询，发挥集群多个RO节点的算力。讲师/嘉宾简介花名: 北侠title: 阿里云高级技术专家个人简介: 深度参与PolarDB项目从零构建的过程，负责过PolarStore分布式存储一致性协议的研发和元数据管理的研发，现负责PolarDB PostgreSQL的HTAP系统的业务和研发。

议题为什么选择计算存储分离的架构内容简介主流的数据库架构有哪些? 市场占比分别有多少? 分别适合什么业务场景? 各自有哪些优缺点? 计算存储分离的架构的优势? 计算存储分离的架构适合的业务场景? 近期的roadmap, 计划解决哪些PG用户诟病多年的PG问题?讲师简介花名: 北侠 title: 阿里云高级技术专家个人简介: 深度参与PolarDB项目从零构建的过程，负责过PolarStore分布式存储一致性协议的研发和元数据管理的研发，现负责PolarDB PostgreSQL的HTAP系统的业务和研发。

大咖云集，燃爆夏日。8月5日，由PostgreSQL中文社区、阿里云PolarDB开源社区、蚂蚁OceanBase开源社区联合举办的开源数据库技术沙龙在杭州召开。 智赢跨境创始人、PG 中国社区 MVP 于培恒带来主题分享《PG在跨境电商的应用》，他说，由于智赢八年积累60亿数据，通过数据处理降低成本被提上日程，本着“省钱的技术才是真本事，不变的技术才是硬通货” 的理念，选择应用 PostgreSQL 数据库。对于智赢的业务场景而言，PostgreSQL 的优点在于数据类型多、索引类型多、函数多、插件多。

大咖云集，燃爆夏日。8月5日，由PostgreSQL中文社区、阿里云PolarDB开源社区、蚂蚁OceanBase开源社区联合举办的开源数据库技术沙龙在杭州召开。 CUUG负责人陈卫星为大家分享了《PolarDB数据库工作室的推广计划》。他说，我们通过走进高校成立《PolarDB数据库工作室》，来举办数据库讲座、认证培训、数据库比赛等活动。目前已经在北科天津学院、天财大学珠江学院、渤海大学、北方学院、温州理工学院等10多所院校成立工作室，通过PolarDB 初级认证的学生已经突破1000多人。

云原生数据库PolarDB PostgreSQL版助力企业降本增效方案，主讲人：阿里云数据库PolarDB产品经理张琦瑄。PolarDB提供了云原生一站式的数据管理与服务，同时以极低的成本，提供商业数据库的性能。

《大模型与PolarDB数据库在企业专属知识库的探索和演进》，主讲人南靖，阿里云数据库高级架构师、PolarDB开源社区技术委员会副主席。

5月12日，由PolarDB开源社区和PostgreSQL中文社区联合举办的开源数据库技术沙龙（温州站）圆满落幕！本次活动邀请到来自阿里云、PG中文社区、温州大学等多位资深技术专家与老师，共同探讨研讨数据库在云计算、AI等领域的发展趋势和机遇，推动数据库人才发展。

pg4ml 机器学习框架是基于 PostgreSQL v13 实现的、使用 plpgsql 编写的机器学习框架，本次讲解的实验环境基于PolarDB-PG开源数据库。本次分享主要介绍框架的实现细节，并构建XOR两层网络的模型案例，包括计算图和链式求导设计、训练任务的结构与准备、执行、监控、测试验证等内容。

pg4ml 机器学习框架是基于 PostgreSQL v13 实现的、使用 plpgsql 编写的机器学习框架，本次讲解的实验环境基于PolarDB-PG开源数据库。本次分享主要介绍框架的实现细节，并构建XOR两层网络的模型案例，包括数据集、XOR分类的案例与原理、神经网络节点、训练任务结构与执行等内容。

数据库开发者的核心要素是什么？不同市场所需人才的共性和差异性在哪里？开源数据库人才是如何提升自我竞争力的？本期大咖说，阿里云数据库开源负责人惊玄携手CUUG负责人陈卫星，与你分享数据库开源人才的培养经验。

本系列课程将面向DBA、高校学生、内核爱好者，分15个章节，系统化介绍PG核心技术原理、用法和代码实现。希望通过课程学习，让没有内核经验的同学和DBA，也可以进行简单的特性开发，更深入理解PG配置和运行原理。本节课将讲述 PostgreSQL 索引基本介绍，涵盖Hash索引、Bitmap索引、GiST索引、GIN索引、brin索引、其他索引等内容。

本系列课程将面向DBA、高校学生、内核爱好者，分15个章节，系统化介绍PG核心技术原理、用法和代码实现。希望通过课程学习，让没有内核经验的同学和DBA，也可以进行简单的特性开发，更深入理解PG配置和运行原理。本节课将讲述PostgreSQL的存储管理，涵盖主流存储引擎架构和原理（Oracle RAC Cache Fusion、阿里云三层解耦、XEngine 的LSMTree实现）、PG页面和元组（MySQL、PG页面结构对比）、Buffer管理、淘汰算法（常用淘汰算法）等内容。讲师/嘉宾简介漠雪，13年数据库内核开发和架构设计经验，从无到有参与PolarDB、GaussDB等多款数据库系列产品的内核架构设计和开发，多年美国、以色列等海外研发经验，了解数据库行业技术趋势、PG和MySQL内核技术及海外社区运作等。目前主要负责横向拉通阿里云数据库各产品通用技术和架构演进，标准化，开源技术等工作。

开源PostgreSQL的WAL主从复制在高压力下会导致大量的网络传输以及从库延迟, PolarDB的共享存储架构如何使用lazy方式实现低带宽毫秒级延迟复制. 讲师简介 花名: 北侠 title: 阿里云高级技术专家 个人简介: 深度参与PolarDB项目从零构建的过程，负责过PolarStore分布式存储一致性协议的研发和元数据管理的研发，现负责PolarDB PostgreSQL的HTAP系统的业务和研发。

大纲： • 分布式一致性中的概念 • 分布式有哪些一致性算法 • 具体介绍下paxos和raft • 分布式一致性算法能干什么 • 分布式一致性算法和分布式事务的关系 • 最后介绍下PolarStore的一致性算法讲师简介花名: 北侠 title: 阿里云高级技术专家个人简介: 深度参与PolarDB项目从零构建的过程，负责过PolarStore分布式存储一致性协议的研发和元数据管理的研发，现负责PolarDB PostgreSQL的HTAP系统的业务和研发。

什么是一致性?业务解释.各个状态下的一致性保障原理崩溃恢复如何恢复到一致的状态PITR恢复到过去的一致状态逻辑备份, 一致性, 原理. RR并行备份, 事务隔离 snapshot import物理备份, 一致性, 原理. copy , FULL PAGE WAL , clog讲师简介花名: 北侠 title: 阿里云高级技术专家个人简介: 深度参与PolarDB项目从零构建的过程，负责过PolarStore分布式存储一致性协议的研发和元数据管理的研发，现负责PolarDB PostgreSQL的HTAP系统的业务和研发。

MySQL、PostgreSQL，乃至各种各样的数据库，孰强孰弱，难以辨别。究其原因，只因”不识庐山真面目，只缘身在此山中“。只需跳出”数据库“三字，一切自然看的分明。本次分享将带你换个维度，发现真相。

大咖云集，燃爆夏日。8月5日，由PostgreSQL中文社区、阿里云PolarDB开源社区、蚂蚁OceanBase开源社区联合举办的开源数据库技术沙龙在杭州召开。 中启乘数科技创始人唐成为大家带来《高性能PolarDB一体机解决方案》，他围绕PolarDB的特点、高性能一体机的核心技术、使用场景三个方面来分享了一体机CData的解决方案。他说，CData是将数据库的最佳实践与快速发展的硬件相结合，把计算能力、网络能力、存储能力等各方面做到最佳优化，提供一套高性能、高可靠，最佳性价比的数据库平台，它的使用场景也包括高可用、强一致性、大容量的场景。

阿里云PolarDB数据库技术专家吴辉静：《PolarDB PostgreSQL企业级特性解读——Global Cache》。本次分享首先介绍了PostgreSQL的缓存机制data cache和meta cache，并分析了其中存在的问题，随后提出了PolarDB的global cache优化方案，吴老师在分享中详细说明了global cache的架构与实现。

在本次PolarDB & ScaleFlux 联合meetup中，来自乘数科技的唐成老师分享了如何使用Clup云管控平台快速体验PolarDB的实践案例。