RDS FOR MYSQL 各版本利用物理备份进行本地恢复的方法

本文涉及的产品
对象存储 OSS,20GB 3个月
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
简介: RDS for mysql利用物理备份文件进行本地恢复笔记,包含5.5,5.6,5.7,8.0版本


下面文档讲述RDS FOR MYSQL 各版本利用物理备份进行本地恢复的方法(5.5(文档末尾才有5.5恢复方法),5.6,5.7 ,8.0):

说明:

1. 本地自建Mysql数据必须和云rds for mysql版本大版本保持一致 2. 64位的Linux系统 3. MySQL 5.6及之前(含5.5)的版本需要安装 Percona XtraBackup 2.3 ; MySQL 5.7版本需要安装 Percona XtraBackup 2.4;MySQL 8.0版本需要安装 Percona XtraBackup 8.0

4. 为了快速恢复,本地mysql安装都采用centos的yum安装方式



5.7/5.6恢复示例:

安装mysql:
1.下载yum源
centos6系统执行下面下载安装: wget 
https://repo.mysql.com//mysql80-community-release-el6-1.noarch.rpm

yum localinstall mysql80-community-release-el6-1.noarch.rpm
centos7系统执行下面下载安装: wget  https://repo.mysql.com//mysql80-community-release-el7-1.noarch.rpm yum localinstall mysql80-community-release-el7-1.noarch.rpm 2.配置yum源
yum -y install yum-utils

#根据选择安装需要的版本 mysql5.7版本:
yum-config-manager --disable   mysql80-community yum-config-manager --enable   mysql57-community mysql5.6版本: yum-config-manager --disable   mysql80-community  yum-config-manager --enable   mysql56-community
3.安装mysql server (yum安装完成后不慌启动mysql)
yum install mysql-community-server
4.替换/etc/my.cnf文件,其中包括跳过权限表启动的配置项:

[mysqld]
innodb_checksum_algorithm=crc32
innodb_data_file_path=ibdata1:200M:autoextend
innodb_log_files_in_group=2
innodb_log_file_size=524288000
innodb_undo_directory=/var/lib/mysql/
basedir=/usr
datadir=/var/lib/mysql
innodb_undo_tablespaces=0
server_id=999098802
skip-grant-tables=1
sql_mode=''
1).配置yum源
yum install yum update percona-release


2). 查看yum源,选择要安装的percona xtrabackup软件
yum list | grep percona
yum -y install percona-xtrabackup.x86_64           5.6版本需要安装这个 yum -y install percona-xtrabackup-24.x86_64 5.7版本需要安装这个 yum -y install percona-xtrabackup-80.x86_64 8.0版本安装这个

6.下载备份文件并恢复:

目前物理备份集文件有3种格式:

  • tar 压缩包 (.tar.gz 后缀)
  • xbstream 压缩包 (.xb.gz 后缀)
  • xbstream 文件包 (_qp.xb 后缀)

根据RDS获取的下载地址下载相应物理备份文件,注意下载文件名可能有不同: wget -c 'rds备份文件下载地址 -O bak.tar.gz 这个到RDS控制台备份恢复里面去获取备份集下载地址,注意下载地址这里用wget下载需要用单引号引起来,否则会报403错误

例如: wget -c 'https://rdsbak-bj-v4.oss-cn-beijing.aliyuncs.com/custins15680923/hins8532551_data_20190812213747_qp.xb?OSSAccessKeyId=LTAIyKzxtSYNknVO&Expires=1565792827&Signature=kz%2F842LvRYwLuU6q9%2BVyZF70pZY%3D'   -O bak_qp.xb wget -c 'https://rdsbak-bj-v4.oss-cn-beijing.aliyuncs.com/custins15680923/hins8532551_data_20190812213747.tar.gz?OSSAccessKeyId=LTAIyKzxtSYNknVO&Expires=1565792827&Signature=kz%2F842LvRYwLuU6q9%2BVyZF70pZY%3D'     -O bak.tar.gz 备注: 获取的下载地址链接里面就包含了rds备份文件的名字,例如上面两个就分别是:hins8532551_data_20190812213747_qp.xb  hins8532551_data_20190812213747.tar.gz
解压备份文件:

对于tar 压缩包 (.tar.gz 后缀),使用命令:

tar -izxvf <数据备份文件名>.tar.gz -C  /var/lib/mysql

对于xbstream 压缩包 (.xb.gz 后缀),使用命令:

gzip -d -c <数据备份文件名>.xb.gz | xbstream -x -v -C /var/lib/mysql

对于xbstream 文件包 (_qp.xb 后缀),使用命令:

## 解包
cat <数据备份文件名>_qp.xb | xbstream -x -v -C /var/lib/mysql
## 解压
innobackupex --decompress --remove-original /var/lib/mysql

说明: 你下载的备份文件在哪个目录下,就在下载的备份文件目录执行解压,-C指定解压到/var/lib/mysql目录,因为yum安装的datadir是这个
cd  /var/lib/mysql
innobackupex --defaults-file=backup-my.cnf --apply-log /var/lib/mysql
chown -R mysql:mysql /var/lib/mysql
/etc/init.d/mysqld start
更新aliyun_root@127.0.0.1密码:
mysql     #shell里面执行mysql连接mysql并修改密码 mysql>select user,host from mysql.user; 查看是否有aliyun_root@127.0.0.1这个用户,可根据需要来设置根据这个sql查看到有的账号密码
mysql>flush privileges;
mysql>SET PASSWORD FOR 'aliyun_root'@'127.0.0.1' = PASSWORD('MyNewPass');
mysql>exit
删除/etc/my.cnf里面的skip-grant-tables=1​​​​​​
/etc/init.d/mysqld restart
账号也迁移过来了的,可以用账号云mysql的账号登陆了:

登陆:
mysql -ualiyun_root -h127.0.0.1 -pMyNewPass 这里注意登陆需要用到-h127.0.0.1,因为RDS里面没有localhost主机的链接地址,不指定会报错
mysql>use mysql;
mysql>alter table proc engine=myisam;
mysql>alter table event engine=myisam;
mysql>alter table  func engine=myisam;

==================================================================== mysql 8.0恢复:

1.下载yum源

centos6系统执行下面下载安装:
wget 
https://repo.mysql.com//mysql80-community-release-el6-1.noarch.rpm

yum localinstall mysql80-community-release-el6-1.noarch.rpm

centos7系统执行下面下载安装:
wget  https://repo.mysql.com//mysql80-community-release-el7-1.noarch.rpm
yum localinstall mysql80-community-release-el7-1.noarch.rpm



2.配置yum源

yum -y install yum-utils

3.安装mysql server (yum安装完成后不慌启动mysql)

yum install mysql-community-server


4.替换/etc/my.cnf文件,其中包括跳过权限表启动的配置项:
[mysqld]
lower_case_table_names = 1
innodb_checksum_algorithm=crc32
innodb_data_file_path=ibdata1:200M:autoextend
innodb_log_files_in_group=2
innodb_log_file_size=524288000
innodb_undo_directory=/var/lib/mysql/
basedir=/usr
datadir=/var/lib/mysql
#innodb_undo_tablespaces=0
server_id=999098802
skip-grant-tables=1
sql_mode=''
log_error=/var/lib/mysql/mysqld.err





1).配置percona yum源

yum update percona-release





2). 查看yum源,选择要安装的percona xtrabackup软件

yum list | grep percona

yum -y install percona-xtrabackup-80.x86_64       8.0版本安装这个
yum -y install qpress



6.下载备份文件并恢复:


目前物理备份集文件有3种格式:



  • tar 压缩包 (.tar.gz 后缀)
  • xbstream 压缩包 (.xb.gz 后缀)
  • xbstream 文件包 (_qp.xb 后缀)



根据RDS获取的下载地址下载相应物理备份文件,注意下载文件名可能有不同:
wget -c '
rds备份文件下载地址' -O bak.tar.gz     这个到RDS控制台备份恢复里面去获取备份集下载地址,注意下载地址这里用wget下载需要用单引号引起来,否则会报403错误

例如:
wget -c 'https://rdsbak-bj-v4.oss-cn-beijing.aliyuncs.com/custins15680923/hins8532551_data_20190812213747_qp.xb?OSSAccessKeyId=LTAIyKzxtSYNknVO&Expires=1565792827&Signature=kz%2F842LvRYwLuU6q9%2BVyZF70pZY%3D'     -O bak_qp.xb

wget -c 'https://rdsbak-bj-v4.oss-cn-beijing.aliyuncs.com/custins15680923/hins8532551_data_20190812213747.tar.gz?OSSAccessKeyId=LTAIyKzxtSYNknVO&Expires=1565792827&Signature=kz%2F842LvRYwLuU6q9%2BVyZF70pZY%3D'     -O bak.tar.gz

备注: 获取的下载地址链接里面就包含了rds备份文件的名字,例如上面两个就分别是:hins8532551_data_20190812213747_qp.xb   hins8532551_data_20190812213747.tar.gz



解压备份文件:



对于tar 压缩包 (.tar.gz 后缀),使用命令:



tar -izxvf <数据备份文件名>.tar.gz -C  /var/lib/mysql



对于xbstream 压缩包 (.xb.gz 后缀),使用命令:



gzip -d -c <数据备份文件名>.xb.gz | xbstream -x -v -C /var/lib/mysql



对于xbstream 文件包 (_qp.xb 后缀),使用命令:



## 解包
cat <数据备份文件名>_qp.xb | xbstream -x -v -C /var/lib/mysql
## 解压
cd /var/lib/mysql
xtrabackup  --decompress --remove-original --target-dir=/var/lib/mysql
   


说明: 你下载的备份文件在哪个目录下,就在下载的备份文件目录执行解压,-C指定解压到/var/lib/mysql目录,因为yum安装的datadir是这个

cd  /var/lib/mysql

xtrabackup --prepare --apply-log-only --target-dir=/var/lib/mysql

说明,如果用到分区表这步可能会有下面类似报错,这个报错直接忽略

2019-08-19T12:33:14.761704Z 0 [ERROR] [MY-010520] [Server] Invalid (old?) table or database name 'zzlogger_sale_order#p#p40'
2019-08-19T12:33:14.772460Z 0 [ERROR] [MY-010520] [Server] Invalid (old?) table or database name 'zzlogger_sale_order#p#p42'
2019-08-19T12:33:14.772736Z 0 [ERROR] [MY-010520] [Server] Invalid (old?) table or database name 'zzlogger_sale_order#p#p43'
2019-08-19T12:33:14.772900Z 0 [ERROR] [MY-010520] [Server] Invalid (old?) table or database name 'zzlogger_sale_order#p#p44'
2019-08-19T12:33:14.773254Z 0 [ERROR] [MY-010520] [Server] Invalid (old?) table or database name 'zzlogger_sale_order#p#p60'
2019-08-19T12:33:14.773650Z 0 [ERROR] [MY-010520] [Server] Invalid (old?) table or database name 'zzlogger_sale_order#p#p45'



chown -R mysql:mysql /var/lib/mysql

mysqld --datadir=/var/lib/mysql --upgrade=force --user=mysql


更新aliyun_root@127.0.0.1密码:

mysql     #shell里面执行mysql连接mysql并修改密码
mysql>select user,host from mysql.user;   查看是否有aliyun_root@127.0.0.1这个用户,可根据需要来设置根据这个sql查看到有的账号密码

mysql>flush privileges;

mysql>alter user'aliyun_root'@'127.0.0.1' identified by 'some34QA';

mysql>exit


删除/etc/my.cnf里面的skip-grant-tables=1​​​​​​ ps -ef |grep mysql 查看先前启动的mysql进程,然后Kill下 kill -9 线程id

/etc/init.d/mysqld start (centos6执行这个) systemctl start mysqld (centos7执行这个)

账号也迁移过来了的,可以用账号云mysql的账号登陆了:



登陆:

mysql -ualiyun_root -h127.0.0.1 -pMyNewPass       这里注意登陆需要用到-h127.0.0.1,因为RDS里面没有localhost主机的链接地址,不指定会报错

==================================================================== 5.5版本的恢复: 2)   yum localinstall mysql80-community-release-el6-1.noarch.rpm
3)   yum -y install yum-utils
4)   yum-config-manager --disable mysql80-community
5)   yum-config-manager --enable mysql55-community
6)   yum install mysql-community-server -y
7)   vi /etc/my.cnf   添加下面内容,注意区别于5.6,5.7版本的内容
[mysqld]
innodb_data_file_path=ibdata1:200M:autoextend
innodb_log_files_in_group=2
innodb_log_file_size=524288000
basedir=/usr
datadir=/var/lib/mysql
server_id=999098802
skip-grant-tables=1
sql_mode=''


步骤3:
安装percona2.3

1)yum install 2)yum install percona-xtrabackup.x86_64


步骤4:
准备好mysql5.5的物理备份安装包,省略
假设这里获取的物理备份文件名字叫:a.tar.gz


步骤5:
开始恢复


1)tar -izxvf a.tar.gz  -C /var/lib/mysql
2)  cd /var/lib/mysql
3)  innobackupex --defaults-file=backup-my.cnf --apply-log /var/lib/mysql
4)  chown -R mysql:mysql /var/lib/mysql
5)  /etc/init.d/mysqld start
6)  mysql    直接进入mysql命令会话,进入后依次执行下面命令
mysql> flush privileges;
Query OK, 0 rows affected (0.00 sec)

mysql> select user,host from mysql.user;
+---------------+--------------+
| user          | host         |
+---------------+--------------+
| aurora        | %            |
| replicator    | 10.151.82.81 |
| root          | 127.0.0.1    |
| root          | ::1          |
| rdsflashback  | localhost    |
+---------------+--------------+
8 rows in set (0.00 sec)

mysql> SET PASSWORD FOR 'root'@'127.0.0.1' = PASSWORD('MyNewPass');
Query OK, 0 rows affected (0.00 sec)

mysql> exit

可以再登陆mysql查看数据库信息:
mysql -uroot -pMyNewPass -h127.0.0.1
mysql>use mysql;
mysql>alter table proc engine=myisam;
mysql>alter table event engine=myisam;
mysql>alter table  func engine=myisam;
mysql>show databases;


相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助 &nbsp; &nbsp; 相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
相关文章
|
1月前
|
关系型数据库 MySQL Linux
在 CentOS 7 中通过编译源码方式安装 MySQL 数据库的详细步骤,包括准备工作、下载源码、编译安装、配置 MySQL 服务、登录设置等。
本文介绍了在 CentOS 7 中通过编译源码方式安装 MySQL 数据库的详细步骤,包括准备工作、下载源码、编译安装、配置 MySQL 服务、登录设置等。同时,文章还对比了编译源码安装与使用 RPM 包安装的优缺点,帮助读者根据需求选择最合适的方法。通过具体案例,展示了编译源码安装的灵活性和定制性。
104 2
|
3月前
|
存储 SQL 关系型数据库
一篇文章搞懂MySQL的分库分表,从拆分场景、目标评估、拆分方案、不停机迁移、一致性补偿等方面详细阐述MySQL数据库的分库分表方案
MySQL如何进行分库分表、数据迁移?从相关概念、使用场景、拆分方式、分表字段选择、数据一致性校验等角度阐述MySQL数据库的分库分表方案。
477 15
一篇文章搞懂MySQL的分库分表,从拆分场景、目标评估、拆分方案、不停机迁移、一致性补偿等方面详细阐述MySQL数据库的分库分表方案
|
2月前
|
关系型数据库 MySQL Java
Django学习二:配置mysql,创建model实例,自动创建数据库表,对mysql数据库表已经创建好的进行直接操作和实验。
这篇文章是关于如何使用Django框架配置MySQL数据库,创建模型实例,并自动或手动创建数据库表,以及对这些表进行操作的详细教程。
79 0
Django学习二:配置mysql,创建model实例,自动创建数据库表,对mysql数据库表已经创建好的进行直接操作和实验。
|
2月前
|
Java 关系型数据库 MySQL
springboot学习四:springboot链接mysql数据库,使用JdbcTemplate 操作mysql
这篇文章是关于如何使用Spring Boot框架通过JdbcTemplate操作MySQL数据库的教程。
52 0
springboot学习四:springboot链接mysql数据库,使用JdbcTemplate 操作mysql
|
2月前
|
数据可视化 关系型数据库 MySQL
【IDEA】配置mysql环境并创建mysql数据库
【IDEA】配置mysql环境并创建mysql数据库
171 0
|
4月前
|
SQL 关系型数据库 MySQL
MySql⭐一、配置MySql数据库,并创建一个表单
MySql⭐一、配置MySql数据库,并创建一个表单
|
5月前
|
开发框架 前端开发 关系型数据库
ABP框架使用Mysql数据库,以及基于SQLServer创建Mysql数据库的架构和数据
ABP框架使用Mysql数据库,以及基于SQLServer创建Mysql数据库的架构和数据
|
MySQL 关系型数据库 数据库