菜鸟学Linux 第094篇笔记 mysql主从复制

简介:

菜鸟学Linux 第094篇笔记 mysql主从复制




内容总览

课程总览

MySQL Replication(主从复制)

二进制日志

中继日志

数据库读写分离原理

当数据库写操作特别繁忙时,如何解决

配置MySQL复制基本步骤

配置主从服务器详细步骤

配置主主mysql模式配置(简略说,因为不推荐使用此模式)

自行研究mysql主从复制基于加密方式

percona提供的主从复制管理工具





接下来要讲解的课程

大规模,高并发web服务器体系结构;

mysql复制, Nginx, LNMP, Memcached, Tomcat(java, servlet, 集群), varnish(squid)

NoSQL(redis, mongodb)




MySQL Replication


mysql log

二进制日志

事务日志

错误日志

一般查询日志

中继日志

慢查询日志



二进制日志

目录:数据目录

mysql-bin.xxxxxx

滚动:达到最大上限, flush logs, 服务重启

清除日志 mysql> PURGE


日志格式

statement

row

mixed


mysql-bin.index: 二进制日志文件的索引


mysql> SHOW MASTER STATUS; 显示mysql正在使用的日志文件和位置

mysql> SHOW BINARY LOGS; 显示二进制日志文件列表

mysql> SHOW BINLOG EVENTS IN "file";  显示某个二进制日志的详细内容


event:

timestamp

position, offset, OPERATION, server id,


即时点还原

mysql隔离级别

READ-UNCOMMITTED

READ-COMMITTED

REPEATABLE-READ

SERIALIZABLE



 中继日志

  是一个用来接收主服务器发送过来的二进制日志,并在从服务器上再执行一次的一个日志文件

  只有从服务器有


  可以实现冷备份


  一主多从,也可以多级复制

  作用:

  辅助实现备份

  高可用

  异地容灾

  scale out: 分摊负载



  即时点还原,还是需要主服务器的二进制日志文件,和位置



mysql proxy(代理 读写分离)

可以实现mysql的读写分离,当用户连接数据库时,先连接到mysql代理服务器,代理服务器可以

分析用户所发的mysql语句是读还是写,然后再将其发送至不同的后端mysql服务器

rw-spliting


主从架构中,不使用mysql代理,如何让主的负责写,从的负责读? 

(可以在前端软件实现)


一个从mysql服务器,只能属于一个主服务器

amoeba 读写分离

cobar 数据拆分



双主模型无法减轻写操作(不推荐使用)



当数据库写操作特别繁忙时,如何解决

虽然读写分离可以解决数据库读操作的问题,但是写操作依然是由一台服务器来进行,以下是

解决写操作的方案,但是这个需要对公司业务逻辑要非常的了解,还有一种就是数据库设计时,

设计数据库的设计者,当时就已经对公司未来的业务发展方向,和数据库增长趋势有了归划,

哪些是热点区域,哪里表要放到一个数据库里等。(当然后者这位设计者肯定是个高人呵呵)

(拒听高人说,这个没有做DBA 3~5年一般公司不敢让你来操作这个)


垂直拆分

它是将数据库里的多张表拆分为多个数据库来实现其写操作分布到多个服务器

水平拆分

它是将数据库的某些热区域的表进行拆分,即将一张表以行进行拆分

(这里只做基本了解,具体无法深入只要知道即可,由于水平学得很浅呵呵)





配置MySQL复制基本步骤


1. master

启用二进制日志

log-bin = master-bin

log-bin-index = master-bin.index


选择一个server-id

server-id = {0-2^32}


创建具有复制权限的用户

REPLICATION SLAVE

REPLICATION CLIENT



2. slave

启用中继日志

relay-log = relay-log

relay-log-index = 


选择一个唯一的server-id (千万别和主服务器重复)

server-id = {0-2^32}


连接至主服务器,并开始复制数据

CHANGE MASTER TO

MASTER_HOST='',MASTER_PORT='',MASTER_LOG_FILE='',MASTER_LOG_POS='',

MASTER_USER='',MASTER_PASSWORD='';    (一行命令)


START SLAVE;


START SLAVE IO_Thread;

START SLAVE SQL_Thread;



复制线程

master: dump

slave: IO_Thread, SQL_Thread





配置主从服务器详细步骤

准备工作 

两台节点 192.168.11.131 192.168.11.132

安装mysql

基本配置不作详解,这里说一些不一样的配置


1. 主mysql配置

# vim /etc/my.cnf

datadir = /mydata/data

innodb_file_per_table = 1

log-bin=master-bin

log-bin-index=master-bin.index

server-id = 1


分配用户使其有复制权限

# mysql

mysql> GRANT REPLICATION SLAVE ON *.* TO 'copyuser'@'192.168.11.%' 

IDENTIFIED BY 'copyps';   (一行命令)

mysql> FLUSH PRIVILEGES;


配置sync-binlog = ON 



2.从mysql配置


关闭二进制日志记录功能/etc/my.cnf

# vim /etc/my.cnf

注销此下两项

#log-bin=master-bin

#log-bin-index=master-bin.index


开启中继日志

# vim /etc/my.cnf

在[mysqld]下添加此两项

relay-log = relay-log

relay-log-index = relay-log.index

修改server-id (注意千万不要和主mysql的id相同)

server-id       = 11


连接主mysql服务器

# mysql 

mysql> CHANGE MASTER TO MASTER_HOST='192.168.11.131',MASTER_USER='copyuser',

MASTER_PASSWORD='copyps',MASTER_PORT=3306,MASTER_LOG_FILE='master-bin.000002',

MASTER_LOG_POS=107;    (一行命令)


查看连接主mysql服务器状态

mysql> SHOW SLAVE STATUS\G;


启动从mysql服务器

mysql> START SLAVE;   

此时便可实现主从复制,现在可以试试在主服务器执行创建表删除等操作会不会同步到从

服务器。 但是从服务器现在还有写权限,需要修改为只读模式


修改从mysql为只读模式(但对有SUPER权限是没有效果的)

vim /etc/my.cnf

在[mysqld]下添加一行

read_only = ON

(注意修改完成配置文件需要重启mysqld服务)


验证只读模式是否开启

mysql> SHOW GLOBAL VARIABLES LIKE 'read_only';



3.从mysql服务器是如何保存主mysql器的密码的?

在数据目录文件里会有这样两个文件,自行直接看一下吧 呵呵

master.info 和 relay-log.info



4.启用半同步复制配置[可选配置,优化性能]

On Master

mysql> INSTALL PLUGIN rpl_semi_sync_master SONAME 'semisync_master.so';

mysql> SET GLOBAL rpl_semi_sync_master_enabled = 1;

mysql> SET GLOBAL rpl_semi_sync_master_timeout = 2000;


On Slave

mysql> INSTALL PLUGIN rpl_semi_sync_slave SONAME 'semisync_slave.so';

mysql> SET GLOBAL rpl_semi_sync_slave_enabled = 1;

mysql> STOP SLAVE IO_THREAD;

mysql> START SLAVE IO_THREAD;


使其永久生效

On Master

vim /etc/my.cnf 在[mysqld]下加入此两行

rpl_semi_sync_master_enabled = 1

rpl_semi_sync_master_timeout = 2000


On Master

vim /etc/my.cnf 在[mysqld]下加入此行

rpl_semi_sync_master_enabled = 1


验证服务器是否开启semi_sync功能

mysql> SHOW GLOBAL VARIABLES LIKE 'rpl%';




配置主主mysql模式配置(简略说,因为不推荐使用此模式)

1. 两台服务器都各自建立一个具有复制权限的用户

2. 两台服务器的server-id必须不同

3. 都启用中继日志功能和二进制日志功能


一台主服务器配置

auto-increment-increment = 2

auto-increment-offset = 1

步进从1开始,每次步进2 即1,3,5,7....


另一台主服务器配置

auto-increment-increment = 2

auto-increment-offset = 2

步进从2开始,每次步进2 即2,4,6,8....


4. 两台服务器都查询自己的binglog日志位置,以供对方服务器连接自己的

mysql> SHOW MASTER STATUS\G;

mysql> CHANGE MASTER TO ...,MASTER_LOGFILE='mysql-bin.000001',

   MYSTER_LOG_POS=710; (注意位置和日志文件都是对方的,切记切记!!!)



自行研究mysql主从复制基于加密方式

建立CA证书中心,给自己签名证书,建立程序证书,建立证书请求,CA签署请求,

mysql配置变量指引证书位置(个人想法,呵呵,待以后查看官方文档再详解)




percona提供的主从复制管理工具

percona-toolkit (可到官网下载)

下载安装后其命令都是以pt-开头 输入pt-+TAB键显示的命令 (下去可以自行研究)

mattki-tools(早期)

本文转自Winthcloud博客51CTO博客,原文链接http://blog.51cto.com/winthcloud/1895008如需转载请自行联系原作者


Winthcloud

相关实践学习
每个IT人都想学的“Web应用上云经典架构”实战
本实验从Web应用上云这个最基本的、最普遍的需求出发,帮助IT从业者们通过“阿里云Web应用上云解决方案”,了解一个企业级Web应用上云的常见架构,了解如何构建一个高可用、可扩展的企业级应用架构。
MySQL数据库入门学习
本课程通过最流行的开源数据库MySQL带你了解数据库的世界。   相关的阿里云产品:云数据库RDS MySQL 版 阿里云关系型数据库RDS(Relational Database Service)是一种稳定可靠、可弹性伸缩的在线数据库服务,提供容灾、备份、恢复、迁移等方面的全套解决方案,彻底解决数据库运维的烦恼。 了解产品详情: https://www.aliyun.com/product/rds/mysql 
相关文章
|
3月前
|
关系型数据库 MySQL 索引
MySQL多表练习笔记
链接可行,多表查询语法
125 0
|
7月前
|
Java 关系型数据库 MySQL
在Linux平台上进行JDK、Tomcat、MySQL的安装并部署后端项目
现在,你可以通过访问http://Your_IP:Tomcat_Port/Your_Project访问你的项目了。如果一切顺利,你将看到那绚烂的胜利之光照耀在你的项目之上!
422 41
|
7月前
|
开发框架 Java 关系型数据库
在Linux系统中安装JDK、Tomcat、MySQL以及部署J2EE后端接口
校验时,浏览器输入:http://[your_server_IP]:8080/myapp。如果你看到你的应用的欢迎页面,恭喜你,一切都已就绪。
537 17
|
7月前
|
Java 关系型数据库 MySQL
在Linux操作系统上设置JDK、Tomcat、MySQL以及J2EE后端接口的部署步骤
让我们总结一下,给你的Linux操作系统装备上最强的军队,需要先后装备好JDK的弓箭,布置好Tomcat的阵地,再把MySQL的物资原料准备好,最后部署好J2EE攻城车,那就准备好进军吧,你的Linux军团,无人可挡!
170 18
|
7月前
|
关系型数据库 MySQL Java
安装和配置JDK、Tomcat、MySQL环境,以及如何在Linux下更改后端端口。
遵循这些步骤,你可以顺利完成JDK、Tomcat、MySQL环境的安装和配置,并在Linux下更改后端端口。祝你顺利!
488 11
|
7月前
|
开发框架 关系型数据库 Java
Linux操作系统中JDK、Tomcat、MySQL的完整安装流程以及J2EE后端接口的部署
然后Tomcat会自动将其解压成一个名为ROOT的文件夹。重启Tomcat,让新“植物”适应新环境。访问http://localhost:8080/yourproject看到你的项目页面,说明“植物”种植成功。
243 10
|
7月前
|
运维 监控 中间件
Linux运维笔记 - 如何使用WGCLOUD监控交换机的流量
WGCLOUD是一款开源免费的通用主机监控工具,安装使用都非常简单,它可以监控主机、服务器的cpu、内存、磁盘、流量等数据,也可以监控数据库、中间件、网络设备
|
8月前
|
Oracle 关系型数据库 MySQL
Oracle linux 8 二进制安装 MySQL 8.4企业版
Oracle linux 8 二进制安装 MySQL 8.4企业版
340 1
|
存储 关系型数据库 MySQL
LINUX中的mysql(一)安装
MySQL是一种常用的开源关系型数据库管理系统,广泛应用于Linux系统中。它提供了一个灵活、高效和可扩展的数据库解决方案,被许多应用程序和网站用于存储和管理数据。
297 0
|
Ubuntu 关系型数据库 MySQL
Linux系统MySQL安装
【10月更文挑战第19天】本文介绍了在 Linux 系统上安装 MySQL 的步骤,包括安装前准备、安装 MySQL、启动 MySQL 服务、配置 MySQL 以及验证安装。适用于 Ubuntu/Debian 和 CentOS/Fedora 系统,提供了详细的命令示例。
1539 1