数据库TiDB-01.数据库架构概述

本文涉及的产品
公共DNS(含HTTPDNS解析),每月1000万次HTTP解析
云解析 DNS,旗舰版 1个月
全局流量管理 GTM,标准版 1个月
简介: TiDB兼容MySQL 5.7协议,支持水平扩容或者缩容的金融级高可用的云原生分布式数据库。

TiDB体系架构

TiDB兼容MySQL 5.7协议,支持水平扩容或者缩容的金融级高可用的云原生分布式数据库。

TiDB的体系架构为:

image-20230128224256490

TiDB Server,接收用户会话,解析、编译、优化用户提交的SQL语句,生成执行计划。TiDB Server是无状态的,不存储数据,为了提高并发处理能力,TiDB Server支持水平扩展。

TiKV,用于存储数据,数据按行存储,按Region组织数据,一个Region的大小在96MB~144MB之间,一个Region默认采用Raft协议创建3个副本,提供了高可用性。如果数据库的存储能力不够,数据量太大,则只需要加TiKV节点即可进行扩容。TiKV实现了分布式事务和MVCC。

TiFlash,用于存储数据,与TiKV的Region数据一致,采用列式存储,适合用于统计分析。

PD,是TiDB的大脑,为TiDB集群提供元数据和时间戳。在PD中存放着数据的元数据信息,TiDB Server在解析、优化SQL的时候,会从PD中获取Region与TiKV的元数据信息。PD还提供时间戳标识TSO,每条SQL执行都会获得一个TSO。在事务中,事务开始和事务提交都会获取一个TSO。

TiDB Server

功能:

  • 处理客户端连接
  • SQL语句的解析和编译
  • 关系型数据与KV数据的转化
  • SQL语句的执行
  • 执行online DDL
  • 执行垃圾回收

image-20230128230109724

TiDB Server接收用户会话请求,接收用户SQL并进行解析、编译、优化。由于TiKV是存储的K-V型数据,所以TiDB Server还负责将用户提交的关系型数据转化成K-V型数据。TiKV中存储的数据是保留每次变更的版本的,当版本数据过多,数据就会产生垃圾,TiDB Server还负责垃圾回收,默认每10分钟执行一次。

TiKV

功能:

  • 数据持久化
  • 副本的强一致性和高可用性
  • MVCC(多版本并发控制)
  • 分布式事务支持
  • 算子下推(Coprocessor),是一个分布式计算的模型

image-20230128230655786

TiKV底层是使用RocksDB实现单机节点的K-V型数据的持久化。RocksDB kv是存储的K-V型数据,RocksDB raft存放的是数据从操作指令,即数据操作的增删改查指令。

RocksDB的上一层是Raft协议,Raft协议主要用来实现Region的多副本,一个Region的多个副本中,只有一个是leader角色,其他副本与leader保持同步。

Raft协议的上一层是MVCC,主要用来实现版本控制。

MVCC的上一层是分布式事务层,采用两阶段提交,让TiDB集群实现了事务的功能。

Placement Driver,PD

功能:

  • 整个集群TiKV的元数据存储
  • 分配全局ID和事务ID
  • 生成全局TSO
  • 收集集群信息进行调度
  • 提供Dashboard服务

image-20230128231443448

TiKV会定时向PD汇报节点信息,PD会根据汇报信息实现数据调度,防止数据倾斜。

TiFlash

功能:

  • 异步复制
  • 一致性
  • 列式存储提高分析查询效率
  • 业务隔离
  • 智能选择

image-20230128232010754

TiKV中存储的数据是按行存储的,适合交易场景,主要用于OLTP。

TiFlash中存储的数据与TiKV的数据一致,只是TiFlash是按列存储,适合分析型场景,主要用于OLAP。

TiDB Server的SQL优化器实现了智能选择,根据对SQL进行分析,判断是交易型SQL还是分析型SQL,智能选择数据是从TiKV读取还是从TiFlash读取。

知识点回顾

  1. 下列功能是由 TiKV 或 TiFlash 实现的为?( 选 2 项 )

A. 根据集群中 Region 的信息,发出调度指令

B. 对于 OLAP 和 OLTP 进行业务隔离

C. 将关系型数据转化为 KV 存储进行持久化

D. 将 KV 存储转化为关系型数据返回给客户端

E. 配合 TiDB Server 生成事务的唯一 ID

F. 副本的高可用和一致性

解析:集群中发出调度指令的是PD;将关系型数据转化为 KV 存储在TiDB Server实现;将 KV 存储转化为关系型数据也是在TiDB Server实现;生成事务的唯一 ID是在PD实现的。

  1. 关于 TiKV 或 TiDB Server,下列说法不正确的是?

    A. 数据被持久化在 TiKV 的 RocksDB 引擎中

    B. 对于老版本数据的回收(GC),是由 TiDB Server 在 TiKV 上完成的

    C. 两阶段提交的锁信息被持久化到 TiDB Server 中

    D. Region 可以在多个 TiKV 节点上进行调度,但是需要 PD 节点发出调度指令

解析:本题是反向选择,选择不正确的。TiDB Server不持久化数据的,两阶段提交的锁信息被持久化到TiKV中。

目录
相关文章
|
4天前
|
NoSQL 关系型数据库 MySQL
微服务架构下的数据库选择:MySQL、PostgreSQL 还是 NoSQL?
在微服务架构中,数据库的选择至关重要。不同类型的数据库适用于不同的需求和场景。在本文章中,我们将深入探讨传统的关系型数据库(如 MySQL 和 PostgreSQL)与现代 NoSQL 数据库的优劣势,并分析在微服务架构下的最佳实践。
|
4天前
|
设计模式 缓存 关系型数据库
探索微服务架构中的数据库设计挑战
微服务架构因其模块化和高扩展性被广泛应用于现代软件开发。然而,这种架构模式也带来了数据库设计上的独特挑战。本文探讨了在微服务架构中实现数据库设计时面临的问题,如数据一致性、服务间的数据共享和分布式事务处理。通过分析实际案例和提出解决方案,旨在为开发人员提供有效的数据库设计策略,以应对微服务架构下的复杂性。
|
4天前
|
消息中间件 缓存 监控
优化微服务架构中的数据库访问:策略与最佳实践
在微服务架构中,数据库访问的效率直接影响到系统的性能和可扩展性。本文探讨了优化微服务架构中数据库访问的策略与最佳实践,包括数据分片、缓存策略、异步处理和服务间通信优化。通过具体的技术方案和实例分析,提供了一系列实用的建议,以帮助开发团队提升微服务系统的响应速度和稳定性。
|
1月前
|
存储 自然语言处理 Oracle
Oracle数据库字符集概述及修改方式
【8月更文挑战第15天】Oracle 数据库字符集定义了数据的编码方案,决定可存储的字符类型及其表示方式。主要作用包括数据存储、检索及跨系统传输时的正确表示。常见字符集如 AL32UTF8 支持多语言,而 WE8MSWIN1252 主用于西欧语言。修改字符集风险高,可能导致数据问题,需事先备份并评估兼容性。可通过 ALTER DATABASE 语句直接修改或采用导出-导入数据的方式进行。完成后应验证数据完整性。此操作复杂,须谨慎处理。
|
4天前
|
消息中间件 缓存 监控
优化微服务架构中的数据库访问:策略与实践
随着微服务架构的普及,如何高效管理和优化数据库访问成为了关键挑战。本文探讨了在微服务环境中优化数据库访问的策略,包括数据库分片、缓存机制、异步处理等技术手段。通过深入分析实际案例和最佳实践,本文旨在为开发者提供实际可行的解决方案,以提升系统性能和可扩展性。
|
8天前
|
存储 负载均衡 数据库
探索后端技术:从服务器架构到数据库优化的实践之旅
在当今数字化时代,后端技术作为支撑网站和应用运行的核心,扮演着至关重要的角色。本文将带领读者深入后端技术的两大关键领域——服务器架构和数据库优化,通过实践案例揭示其背后的原理与技巧。无论是对于初学者还是经验丰富的开发者,这篇文章都将提供宝贵的见解和实用的知识,帮助读者在后端开发的道路上更进一步。
|
23天前
|
消息中间件 存储 运维
微服务架构下的数据库选择与挑战
【8月更文第29天】随着微服务架构的流行,如何为每个服务选择合适的数据库成为了一个重要的话题。微服务架构强调将大型应用程序分解为一组小型、独立的服务,这些服务通常各自拥有自己的数据库。这种架构模式带来了灵活性和可扩展性,但也带来了数据一致性、事务管理和跨服务数据访问等方面的挑战。
30 0
|
26天前
|
存储 缓存 关系型数据库
Django后端架构开发:缓存机制,接口缓存、文件缓存、数据库缓存与Memcached缓存
Django后端架构开发:缓存机制,接口缓存、文件缓存、数据库缓存与Memcached缓存
29 0
|
27天前
|
存储 前端开发 关系型数据库
Linux 技术架构:前端、后端与数据库的完美融合
【8月更文挑战第25天】本文深入剖析了Linux操作系统的技术架构,重点介绍了前端、后端及数据库三大核心组成部分。Linux前端技术不仅涵盖了图形用户界面(GUI),包括GNOME、KDE等桌面环境,还涉及HTML、CSS、JavaScript等Web前端技术及其相关框架。后端技术则聚焦于Python、Java等多种编程语言、Apache和Nginx等Web服务器以及MySQL、PostgreSQL等数据库管理系统。Linux数据库技术覆盖了关系型和非关系型数据库,如MySQL、MongoDB等,并提供了多种数据库管理工具。
47 0
|
27天前
|
前端开发 Unix Linux
KVM 架构概述
【8月更文挑战第25天】KVM是基于硬件辅助虚拟化技术的虚拟机监控器,核心依赖于CPU的虚拟化支持如Intel VT和AMD-V。