PG内核解读 - 第3节 存储管理(上)
本文整理自阿里云数据库开源社区Maintainer于巍(花名漠雪),在PostgreSQL数据库内核解读系列的分享。本篇内容主要分为四个部分:
1. 主流存储引擎架构和原理
2. 页面和元组
3. Buffer管理
4. 淘汰算法
阿里云Redis存储之道及演进
Redis作为一个高性能的内存型KV存储系统受到很多开发者的欢迎,在大家的认知里,Redis存储的数据全在内存,主要是用作缓存场景,即通常可以容忍部分数据的丢失。本次分享主要介绍阿里云Redis如何通过对内存中的数据进行持久化以保证数据的可靠性,进一步如何在现有的Redis内核基础上构建一个基于内存+磁盘的混合存储系统。讲师介绍夏德军(夏周),阿里云数据库NoSQL组技术专家,目前主要负责阿里云Redis混合存储系统的设计和研发。开源项目ApsaraCache部分核心Feature的主要贡献者,曾经活跃于Redis开源社区,贡献多个Patch。
使用DataWorks将PolarDB-X中的数据同步到MaxCompute
MaxCompute是适用于数据分析场景的云数据仓库,适用于大型互联网企业的数据仓库和BI分析、网站的日志分析、电子商务网站的交易分析、用户特征和兴趣挖掘等。大数据开发治理平台 DataWorks 基于MaxCompute / EMR / MC-Hologres 等大数据计算引擎,为客户提供专业高效、安全可靠的一站式大数据开发与治理平台。本文介绍 PolarDB-X 与 MaxCompute 系统的快速对接方式,方便您对在线业务数据进行大数据分析。
分布式数据库,挂掉两台机器会发生什么
挂一部分机器,不会丢数据、不会不可服务,是对现代数据库的一个比较基本的要求。对于早期的单机数据库,一般使用主备架构。主备架构有很多的缺陷,并且这些缺陷是无解的。我们将探讨几个问题:除了协议本身,还有什么样的因素影响分布式数据库的可用性?如何计算不同架构的分布式数据库的可用性?KV层的可用性和关系型数据库的可用性是否等价?数据库的可用性和应用的可用性是否是等价的?
沉浸式学习PostgreSQL|PolarDB 21,相似图像搜索
传统数据库不支持图像类型, 图像相似计算函数, 图像相似计算操作服, 相似排序操作符. 所以遇到类似的需求, 需要自行编写应用来解决.
PG|PolarDB 通过imgsmlr插件, 可以将图像转换为向量特征值, 使用相似距离计算函数得到相似值, 使用索引加速相似度排序, 快速获得相似图片, 实现以图搜图.
也可以通过pgvector插件来存储图片向量特征值, 结合大模型服务(抠图、图像向量转换), 可以实现从图像转换、基于图像的相似向量检索全流程能力.
每周问答精选(1129~1203)
为了让各位小伙伴能够方便、快速的了解到 PolarDB 的相关的使用问题,社区每周将精选群内高质量的问题通过该栏目予以统一答复,希望能够对大家有所帮助。
第九届PostgreSQL中国技术大会
2019年11月29~11月30日,由 PostgreSQL 中文社区主办的第九届《PostgreSQL 中国技术大会》将在北京隆重召开。PostgreSQL 作为功能最强的的开源关系型数据库之一,得到了越来越多企业的推广和运用,也越来越受到广大技术爱好者的欢迎和重视。这将是 PostgreSQL 的又一次交流盛会。本次大会以“开源驱动 自主研发”为主题。除了设立一个主会场外,还增设了多个分会场。大会汇聚了来自互联网、电商、教育,金融等各行业领域的专家,将为大家带来一场别开生面而又价值非凡的技术交流盛会。大会议程嘉宾介绍更多信息PostgreSQL 技术进阶钉钉群二维码(扫码入群即可听德哥在线解答)<img src="https://yqfile.alicdn.com/42fdf47ac7e15027b88bdde47787a3d7f31ccf6a.jpeg" width="200"