为什么要备份

数据是企业生存的命脉

什么是备份

将数据另外保存一份

备份到哪里

通常采用异地保存

什么时候备份

备份的窗口期，通常是业务压力最低点

如何备份

  • 备份方法
    • 物理备份
    • 逻辑备份
  • 备份策略
    • 完整备份
    • 增量备份
    • 差异备份
  • 备份三要素
    • BW：完成备份需要的时间
    • RPO：客户可承受的最大数据丢失量
    • RTO：客户可承受的最长停机时间

 容灾级别

级别说明
0无异地备份
1有异地备份
2实现热备份
3在线恢复数据
4定时备份数据
5实时备份数据
6零数据丢失

完整备份

物理备份(cp、tar、zip)

##物理备份及恢复测试：使用cp、tar、zip等命令对数据库磁盘文件进行备份

#server51操作

[root@server51 ~]# systemctl stop mysqld						#停止MySQL服务
[root@server51 ~]# mkdir /bak									#创建备份文件存储目录
[root@server51 ~]# tar -zcPf /bak/db.tar.gz /var/lib/mysql/*	#对MySQL磁盘文件打包
[root@server51 ~]# ls /bak/										#确认备份成功
db.tar.gz

[root@server51 ~]# rm -rf /var/lib/mysql/*						#删除MySQL磁盘文件模拟数据丢失
[root@server51 ~]# tar -zxPf /bak/db.tar.gz -C /				#解压备份数据，恢复数据
[root@server51 ~]# ls /var/lib/mysql/							#确认数据目录下有文件
[root@server51 ~]# chown -R mysql.mysql /var/lib/mysql/			#修改文件归属！！！

[root@server51 ~]# systemctl start mysqld						#启动服务测试数据

[root@server51 ~]# mysql -hlocalhost -uroot -p'123qqq...A' -e "SHOW DATABASES;"

逻辑备份(mysqldump、mysql)

#mysqldump命令用于备份数据
#mysql命令用于恢复数据

##逻辑备份及恢复测试

#备份指定库下的多个表
[root@server51 ~]# mysqldump -hlocalhost -uroot -p'123qqq...A' tarena departments employees salary > /bak/des.sql

#备份多个指定库下的所有表
[root@server51 ~]# mysqldump -hlocalhost -uroot -p'123qqq...A' -B tarena execdb > /bak/te.sql

#备份所有库下的表
[root@server51 ~]# mysqldump -hlocalhost -uroot -p'123qqq...A' -A > /bak/all.sql

[root@server51 ~]# ls /bak/*.sql			#确认数据备份成功
/bak/all.sql  /bak/des.sql  /bak/te.sql

##测试恢复指定库下的表

#删除tarena库下的表模拟数据丢失，注意顺序不能改
[root@server51 ~]# mysql -hlocalhost -uroot -p'123qqq...A' -e "DROP TABLE tarena.salary; DROP TABLE tarena.employees; DROP TABLE tarena.departments;"

#确认departments表、employees表和salary表被删除
[root@server51 ~]# mysql -hlocalhost -uroot -p'123qqq...A' -e "SHOW TABLES FROM tarena;"

#利用des.sql恢复数据
[root@server51 ~]# mysql -hlocalhost -uroot -p'123qqq...A' tarena < /bak/des.sql 

#确认3张表恢复成功
[root@server51 ~]# mysql -hlocalhost -uroot -p'123qqq...A' -e "SHOW TABLES FROM tarena;"

##测试恢复多个库

#删除tarena库和execdb库模拟数据丢失
[root@server51 ~]# mysql -hlocalhost -uroot -p'123qqq...A' -e "DROP DATABASE tarena; DROP DATABASE execdb;"

#确认tarena库和execdb库被删除
[root@server51 ~]# mysql -hlocalhost -uroot -p'123qqq...A' -e "SHOW DATABASES;"

#利用te.sql恢复两个库
[root@server51 ~]# mysql -hlocalhost -uroot -p'123qqq...A' < /bak/te.sql 

#确认两个库恢复成功
[root@server51 ~]# mysql -hlocalhost -uroot -p'123qqq...A' -e "SHOW DATABASES;"

##测试恢复所有库(注意含有server52操作)

#发送all.sql到server52
[root@server51 ~]# scp /bak/all.sql 192.168.88.52:/root	

#确认server52上只有初始库
[root@server52 ~]# mysql -hlocalhost -uroot -p'123456' -e "SHOW DATABASES;"

#确认all.sql存在
[root@server52 ~]# ls /root/all.sql 

#恢复所有库
[root@server52 ~]# mysql -hlocalhost -uroot -p'123456' < all.sql 

#确认库恢复情况
[root@server52 ~]# mysql -hlocalhost -uroot -p'123456' -e "SHOW DATABASES;"

#小问题处理(此时依旧使用旧密码登录，由于服务没重启导致还没加载新的mysql.user文件)
[root@server52 ~]# systemctl restart mysqld
[root@server52 ~]# mysql -hlocalhost -uroot -p'123qqq...A' -e "SHOW DATABASES;"

逻辑备份应用案例 

##编写计划任务执行脚本实现每周周一晚上23点备份服务的所有数据，用系统日期做备份文件名

[root@server51 ~]# vim allbak.sh			#编写备份数据库所有库脚本
[root@server51 ~]# cat allbak.sh 
#!/bin/bash
mysqldump -hlocalhost -uroot -p'123qqq...A' -A > /bak/`date +%F`_all.sql
[root@server51 ~]# chmod +x ./allbak.sh 	#给脚本添加x权限

[root@server51 ~]# crontab -e 				#编写root用户计划任务
no crontab for root - using an empty one
crontab: installing new crontab
[root@server51 ~]# crontab -l				#计划任务内容为每周一晚上23点执行allbak.sh脚本
0 23 * * 1 /bin/bash /root/allbak.sh

[root@server51 ~]# systemctl enable crond.service 	#确保crond服务开机自启动
[root@server51 ~]# systemctl start crond.service 	#确保crond服务启动
[root@server51 ~]#

增量备份(Percona-XtraBackup)在线热备不锁表

##利用Percona-XtraBackup软件实现数据库完整备份与增量备份(server51和server52操作)

##更新自定义Yum源mysqlsofts
[root@pubserver ~]# cd /var/ftp/mysqlsofts/		#切换到自定义mysqlsofts源上传软件(2个)
[root@pubserver mysqlsofts]# ls libev-4.15-1.el6.rf.x86_64.rpm percona-xtrabackup-24-2.4.7-1.el7.x86_64.rpm 
libev-4.15-1.el6.rf.x86_64.rpm  percona-xtrabackup-24-2.4.7-1.el7.x86_64.rpm
[root@pubserver mysqlsofts]# createrepo --update ./			#更新自定义yum源repodata信息
[root@pubserver mysqlsofts]# yum clean all; yum repolist	#确认yum源是否可用及是否更新
...
repolist: 10,085			#相比之前多了2个软件包
[root@pubserver mysqlsofts]# cd
[root@pubserver ~]# 

#server51安装Percona-XtraBackup软件
[root@server51 ~]# yum clean all; yum repolist					#确保yum源可用
...
repolist: 10,085			#相比之前多了2个软件包
[root@server51 ~]# yum -y install percona-xtrabackup-24.x86_64 	#安装Percona-XtraBackup

#server52安装Percona-XtraBackup软件
[root@server52 ~]# yum clean all; yum repolist
repolist: 10,085
[root@server52 ~]# yum -y install percona-xtrabackup-24.x86_64 

##server51上做数据完整备份和增量备份
#策略：0点做完整备份，6点、12点、18点做增量备份

#创建测试数据
[root@server51 ~]# mysql -hlocalhost -uroot -p'123qqq...A'	#登录server51的MySQL服务

mysql> CREATE TABLE execdb.role(name CHAR(20));				#创建测试表role

mysql> INSERT INTO execdb.role VALUES ('tom'),('bob');		#写入两条数据

mysql> SELECT * FROM execdb.role;							#确认数据写入

mysql> exit
Bye
[root@server51 ~]# 

#模拟0点做完整备份
[root@server51 ~]# mkdir /bak/fi				#创建存储Percona备份数据的目录
[root@server51 ~]# innobackupex -u root -p '123qqq...A' --no-timestamp /bak/fi/full	#使用Percona-XtraBackup做完整备份(所有库)
...
230513 03:36:35 completed OK!
[root@server51 ~]# ls /bak/fi/full/				#确保备份数据目录下有数据

#模拟6点做增量备份
[root@server51 ~]# mysql -hlocalhost -uroot -p'123qqq...A' -e "INSERT INTO execdb.role VALUES ('zhangsan');"							   	#写入新数据zhangsan

[root@server51 ~]# mysql -hlocalhost -uroot -p'123qqq...A' -e "SELECT * FROM execdb.role;"										  #确认数据新增成功

[root@server51 ~]# innobackupex -u root -p '123qqq...A' --no-timestamp --incremental --incremental-basedir=/bak/fi/full /bak/fi/incr1		#做第1次增量备，参考完整备
...
230513 03:42:09 completed OK!
[root@server51 ~]# ls /bak/fi/incr1/				 

#模拟12点做增量备份
[root@server51 ~]# mysql -hlocalhost -uroot -p'123qqq...A' -e "INSERT INTO execdb.role VALUES ('lisi');"									#写入新数据lisi

[root@server51 ~]# mysql -hlocalhost -uroot -p'123qqq...A' -e "SELECT * FROM execdb.role;"										  #确认数据新增成功

[root@server51 ~]# innobackupex -u root -p '123qqq...A' --no-timestamp --incremental --incremental-basedir=/bak/fi/incr1 /bak/fi/incr2		#做第2次增量备，参考第1次增量备
...
230513 03:43:39 completed OK!
[root@server51 ~]# ls /bak/fi/incr2/

#模拟18点做增量备份
[root@server51 ~]# mysql -hlocalhost -uroot -p'123qqq...A' -e "INSERT INTO execdb.role VALUES ('wangwu');"									#写入新数据wangwu

[root@server51 ~]# mysql -hlocalhost -uroot -p'123qqq...A' -e "SELECT * FROM execdb.role;"										  #确认数据新增成功

[root@server51 ~]# innobackupex -u root -p '123qqq...A' --no-timestamp --incremental --incremental-basedir=/bak/fi/incr2 /bak/fi/incr3		#做第3次增量备，参考第2次增量备
...
230513 03:44:24 completed OK!
[root@server51 ~]# ls /bak/fi/incr3/

##server51打包完整备份和增量备份数据发送到server52
[root@server51 ~]# tar -zcvf fi.tar.gz /bak/fi/			#打包备份数据
[root@server51 ~]# scp fi.tar.gz 192.168.88.52:/root	#发送备份数据


##server52上做数据完整备份和增量备份恢复
#策略：将所有增量备合并到完整备份统一恢复
#过程：准备恢复数据->合并准备数据->停服务->清理数据库文件->恢复数据->修改文件归属->启服务->测试

#准备恢复数据
[root@server52 ~]# ls fi.tar.gz 			
fi.tar.gz
[root@server52 ~]# tar -xf fi.tar.gz 		#解压备份数据包
[root@server52 ~]# ls /root/bak/fi/			#确认有1完整备+3增量备共4份数据
full  incr1  incr2  incr3
[root@server52 ~]# 

[root@server52 ~]# innobackupex --apply-log --redo-only /root/bak/fi/full/	#准备恢复数据
...
230513 03:53:49 completed OK!
[root@server52 ~]# 

#合并增量备份数据(所有增量备依次合并到完整备)
[root@server52 ~]# innobackupex --apply-log --redo-only --incremental-dir /root/bak/fi/incr1/ /root/bak/fi/full/		#合并incr1到full
...
230513 03:55:21 completed OK!
[root@server52 ~]# innobackupex --apply-log --redo-only --incremental-dir /root/bak/fi/incr2/ /root/bak/fi/full/		#合并incr2到full
...
[root@server52 ~]# innobackupex --apply-log --redo-only --incremental-dir /root/bak/fi/incr3/ /root/bak/fi/full/		#合并incr3到full
...
230513 03:55:55 completed OK!
[root@server52 ~]# 

#恢复数据
[root@server52 ~]# systemctl stop mysqld						#停止MySQL服务
[root@server52 ~]# ps aux | grep mysqld							#确保MySQL主进程退出
[root@server52 ~]# rm -rf /var/lib/mysql/*						#清空MySQL数据目录下文件
[root@server52 ~]# innobackupex --copy-back /root/bak/fi/full/ 	#恢复数据
...
230513 03:57:30 completed OK!
[root@server52 ~]# chown -R mysql.mysql /var/lib/mysql/			#修改数据文件归属！！！

#启动服务
[root@server52 ~]# systemctl start mysqld						#启动MySQL服务
[root@server52 ~]# mysql -hlocalhost -uroot -p'123qqq...A' -e "SELECT * FROM execdb.role;"													 #测试数据恢复情况
+----------+
| name     |
+----------+
| tom      |
| bob      |
| zhangsan |
| lisi     |
| wangwu   |
+----------+
[root@server52 ~]#

实时备份(Binlog)

启用binlog日志

##binlog是MySQL日志类型的一种，记录MySQL所有的写操作

##server51操作
[root@server51 ~]# vim /etc/my.cnf						#编辑MySQL主配置文件启用binlog
[root@server51 ~]# sed -rn '4,6p' /etc/my.cnf
[mysqld]		
log_bin			#启用binlog
server_id=51	#设置server_id值
[root@server51 ~]# systemctl restart mysqld				#重启服务使配置生效
[root@server51 ~]# ls /var/lib/mysql/server51-bin.*		#查看binlog日志相关文件
/var/lib/mysql/server51-bin.index		#binlog日志索引文件
/var/lib/mysql/server51-bin.000001 		#binlog日志文件

测试binlog日志 

#测试binlog日志
[root@server51 ~]# mysql -hlocalhost -uroot -p'123qqq...A'	#登录MySQL服务

mysql> SHOW BINARY LOGS;							#查看所有binlog日志

mysql> SHOW MASTER STATUS;							#查看当前正在使用binlog日志信息

mysql> SELECT * FROM execdb.role;					#执行读操作
		
mysql> SHOW MASTER STATUS;							#binlog日志偏移量不改变(不记录读操作)

mysql> INSERT INTO execdb.role VALUES ('zhaoliu');	#执行写操作

mysql> SHOW MASTER STATUS;							#binlog日志偏移量改变(记录写操作)

操作binlog日志

##操作binlog日志

##生成新的binlog日志
#生成新的binlog日志(方法一：FLUSH LOGS语句)
[root@server51 ~]# mysql -hlocalhost -uroot -p'123qqq...A'	#登录MySQL服务
mysql> SHOW BINARY LOGS;			#查看所有binlog日志(共1个)

mysql> FLUSH LOGS;					#刷新binlog日志

mysql> FLUSH LOGS;					#刷新binlog日志

mysql> FLUSH LOGS;					#刷新binlog日志

mysql> SHOW BINARY LOGS;			#刷新binlog日志(共4个)
mysql> exit
Bye
[root@server51 ~]# ls /var/lib/mysql/server51-bin.*			#查看binlog日志磁盘文件

#生成新的binlog日志(方法二：重启MySQL服务)
[root@server51 ~]# systemctl restart mysqld					#重启MySQL服务

[root@server51 ~]# mysql -hlocalhost -uroot -p'123qqq...A' -e "SHOW BINARY LOGS;"	#查看已有binlog日志(共5个)

[root@server51 ~]# ls /var/lib/mysql/server51-bin.*			#查看binlog日志磁盘文件

#生成新的binlog日志(方法二：mysqldump -F)
[root@server51 ~]# mysqldump --help							#查看mysqldump命令帮助信息

[root@server51 ~]# mysqldump -hlocalhost -uroot -p'123qqq...A' -A -F --lock-all-tables > /bak/ab.sql											   #备份数据同时刷新binlog日志
[root@server51 ~]# mysql -hlocalhost -uroot -p'123qqq...A' -e "SHOW BINARY LOGS;"	#查看已有binlog日志(共6个)

[root@server51 ~]# ls /var/lib/mysql/server51-bin.*			#查看binlog日志磁盘文件

##清理binlog日志
#清理无效的binlog日志(方法一：自动清理)
[root@server51 ~]# vim /etc/my.cnf				#编辑MySQL主配置文件
[root@server51 ~]# sed -rn '4,7p' /etc/my.cnf
[mysqld]
log_bin
server_id=51
expire_logs_days=7		#不活跃的binlog日志默认保留天数
[root@server51 ~]# 								#需重启服务生效，此处不演示了

#清理无效的binlog日志(方法二：手动清理)
[root@server51 ~]# mysql -hlocalhost -uroot -p'123qqq...A'	#登录MySQL服务

mysql> SHOW BINARY LOGS;							#查看已有binlog日志(6个)

mysql> PURGE MASTER LOGS TO "server51-bin.000005";	#清理到指定binlog日志

mysql> SHOW BINARY LOGS;							#查看剩余binlog日志(2个)

#重置binlog日志
mysql> RESET MASTER;								#重置binlog日志

mysql> SHOW BINARY LOGS;							#查看已有binlog日志(1个且编号为1)

自定义binlog日志（记得改权限哦）

#自定义binlog日志存储位置及文件名
[root@server51 ~]# vim /etc/my.cnf					#编辑MySQL主配置文件
[root@server51 ~]# sed -rn '4,7p' /etc/my.cnf
[mysqld]
log_bin=/mylog/db1		#指定binlog日志存储文件和文件名
server_id=51
expire_logs_days=7
[root@server51 ~]# mkdir /mylog/					#创建自定义binlog存储目录
[root@server51 ~]# chown mysql.mysql /mylog/		#将目录归属改为MySQL用户！！
[root@server51 ~]# getenforce 						#确保SELinux关闭
Disabled

[root@server51 ~]# systemctl restart mysqld			#重启服务
[root@server51 ~]# ls /mylog/						#查看自定义binlog日志存储目录
db1.000001  db1.index
[root@server51 ~]# mysql -hlocalhost -uroot -p'123qqq...A' -e "SHOW BINARY LOGS;"	#查看已有binlog日志信息，旧的binlog日志已经作废
mysql: [Warning] Using a password on the command line interface can be insecure.
+------------+-----------+
| Log_name   | File_size |
+------------+-----------+
| db1.000001 |       154 |
+------------+-----------+
[root@server51 ~]#

查看binlog日志内容 

##之前操作中已知binlog日志内容会变化

#查看binlog日志
[root@server51 ~]# mysql -hlocalhost -uroot -p'123qqq...A'		#登录MySQL服务

mysql> SHOW MASTER STATUS;						#查看正在使用的binlog日志信息

mysql> INSERT INTO execdb.role VALUES ('lily');	#执行写操作

mysql> SHOW MASTER STATUS;						#查看正在使用的binlog日志信息

mysql> SHOW BINLOG EVENTS IN "db1.000001";		#查询指定binlog日志中的事件

mysql> exit
Bye
[root@server51 ~]# mysqlbinlog /mylog/db1.000001 
...
#230513  4:36:21 server id 51  end_log_pos 379 CRC32 0xd9e1d239         Write_rows: table id 109 flags: STMT_END_F

BINLOG '
RaNeZBMzAAAAMwAAAFIBAAAAAG0AAAAAAAEABmV4ZWNkYgAEcm9sZQAB/gL+FAGbuuzC
RaNeZB4zAAAAKQAAAHsBAAAAAG0AAAAAAAEAAgAB//4EbGlseTnS4dk=
'/*!*/;
# at 379
#230513  4:36:21 server id 51  end_log_pos 410 CRC32 0x758e0521         Xid = 8
COMMIT/*!*/;
SET @@SESSION.GTID_NEXT= 'AUTOMATIC' /* added by mysqlbinlog */ /*!*/;
DELIMITER ;
# End of log file
/*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;
/*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;
[root@server51 ~]#

使用binlog日志恢复数据 

##由于binlog日志记录MySQL所有写操作的特性，使得binlog日志配合mysqldump可实现完整备份和增量备份功能

#mysqldump做完整备份，binlog做增量备份(server51操作)
[root@server51 ~]# mysql -hlocalhost -uroot -p'123qqq...A' -e "SELECT * FROM execdb.role;"						 	 #查看execdb.role已有记录

[root@server51 ~]# ls /mylog/			#查看binlog日志情况
db1.000001  db1.index

[root@server51 ~]# mysqldump -hlocalhost -uroot -p'123qqq...A' -F --lock-all-tables execdb role > /bak/role.sql				#对execdb.role做备份(完整备)

[root@server51 ~]# cat /bak/role.sql 	#确保数据备份成功

[root@server51 ~]# ls /mylog/			#查看binlog日志情况
db1.000001  db1.000002  db1.index

[root@server51 ~]# mysql -hlocalhost -uroot -p'123qqq...A' -e "INSERT INTO execdb.role VALUES ('lucy');"					   #写入新数据，该操作记录在db1.000002中(增量备)

[root@server51 ~]# scp /bak/role.sql 192.168.88.52:/root		#发送SQL文件
[root@server51 ~]# scp /mylog/db1.000002 192.168.88.52:/root	#发送binlog日志文件

#利用SQL文件和binlog日志恢复数据(server52操作)
[root@server52 ~]# ls role.sql db1.000002 		#查看还原数据需要的文件
db1.000002  role.sql
[root@server52 ~]# mysql -hlocalhost -uroot -p'123qqq...A' -e "DROP TABLE execdb.role;"								#删除execdb.role表

[root@server52 ~]# mysql -hlocalhost -uroot -p'123qqq...A' execdb < role.sql 									 #还原sql文件内的数据(完整恢复)

[root@server52 ~]# mysql -hlocalhost -uroot -p'123qqq...A' -e "SELECT * FROM execdb.role;"				  #查看数据还原情况

[root@server52 ~]# mysqlbinlog db1.000002 | mysql -hlocalhost -uroot -p'123qqq...A'								 #还原binlog日志内的数据(增量恢复)

[root@server52 ~]# mysql -hlocalhost -uroot -p'123qqq...A' -e "SELECT * FROM execdb.role;"				  #查看数据还原情况
+----------+
| name     |
+----------+
| tom      |
| bob      |
| zhangsan |
| lisi     |
| wangwu   |
| zhaoliu  |
| lily     |
| lucy     |
+----------+
[root@server52 ~]#

# mysql # 数据库
Logo
GitCode 开源社区

旨在为数千万中国开发者提供一个无缝且高效的云端环境，以支持学习、使用和贡献开源项目。

更多推荐

[转载]在Windows环境下安装GNU Radio

转自：在Windows环境下安装GNURadio_恐弱智_新浪博客GNU Radio是用Python开发的，大部分开源的工程能够在Linux环境下运行良好，而Windows下却运行的很勉强，而且安装配置都很复杂。GNU Radio算是个例外了，不光提供了Windows的二进制安装，还有比较详细的说明。我是Python小白，所以折腾了好久才弄好，特意记录下来，免得以后再装还折腾。GNU Radio的

avatar GitCode 开源社区

centOS 8 使用dnf安装Docker

DNF是什么？CentOS 8使用YUM软件包管理器版本v4.0.4。现在，该版本使用DNF(已删除YUM)。DNF是软件包管理器。它会在Linux发行版上安装，执行更新并删除软件包。使用DNF安装Docker跳过具有损坏依赖性的程序包一个有效的解决方案是使您的CentOS 8系统使用以下--nobest命令安装最符合条件的版本：sudo dnf install docker...

avatar GitCode 开源社区

定时同步数据库表(mysql+linux+crontab)

sync.sh里面的参数需要改变，ip/username/password/database/tablesync.sh#!/bin/sh# Please change the IP and password of the data source db.# Then change the table name.filename=/home/nington/db/$(date +%Y-%m

avatar GitCode 开源社区