开源数据库MYSQL DBA运维实战 第三章 备份

这篇具有很好参考价值的文章主要介绍了开源数据库MYSQL DBA运维实战 第三章 备份。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

一、关于备份

1.备份原因

丢/删

2.备份目标

1.数据的一致性

2.服务的可用性

3.备份技术

3.1物理备份/冷备份

直接复制数据库文件,适用于大型数据库环境,不受存储引擎的限制,但不能恢复到不同的mysql

tar,cp,scp

拷贝数据,有点快,缺点服务停止

3.2逻辑备份/热备份

备份的是建表,建库,插入等操作所执行SQL语句(DDL,DML,DCL),

mysqldump,mydumper

效率相对较低

4.备份方式

4.1完全备份

4.2增量备份

4.3差异备份

二、实战案例1

percona-xtrabackup

简介

它是开源免费的支持MySQL 数据库热备份的软件,它能对InnoDB和XtraDB存储引擎的数据库非阻塞地备份。它不暂停服务创建Innodb热备份;为mysql做增量备份:在mysql服务器之间做在线表迁移:使创建replication更加容易;备份mysql而不增加服务器的负载。
percona是一家老牌的mysql技术咨询公司。它不仅提供mysal的技术支持、培训、咨询,还发布了mysql的分支版本--percona Server。并围绕perconaServer还发布了一系列的mysql工具。

获得软件包

官网站点:https://www.percona.com/

选择版本

安装

安装YUM仓库

安装percona需要的mysql包

开源数据库MYSQL DBA运维实战 第三章 备份,数据库

安装precona的yum仓库

yum install https://repo.percona.com/yum/percona-release-latest.noarch.rpm

YUM安装percona-xtrabackup

yum install -y  percona-xtrabackup-24.x86_64

查询安装结果

yum  list |  grep percona-xtrabackup

1.完全备份流程

innobackupex  --user=root   --password='Root123@'   /xtrabackup/full

ls  /xtrabackup/full                查看备份目录,数据库,配置文件,日志文件

/xtrabackup/full/2017-08-01 00-00-02/

观察二进制日志位置    

cat /xtrabackup/full/2017-08-01 00-00-18/xtrabackup_binlog_info

2.完全恢复流程

停止数据库   

systemctl   stop  mysql

清理环境(模拟损坏)

rm  -rf   /var/lib/mysql/*

rm  -rf   /var/log/mysqld.log

生成回滚日志

innobackupex   --apply-log   /xtrabackup/full/2017-08-01 00-00-18/    指定被分点

恢复文件

innobackupex   --copy-back   /xtrabackup/full/2017-08-01 00-00-18/ 

登录验证

ls   /var/lib/mysql

chown  -R   mysql.mysql   /var/lib/mysql

systemctl   start   mysqld

mysql   -uroot   -p'Root123@'

3.增量备份流程

准备工作

开源数据库MYSQL DBA运维实战 第三章 备份,数据库

完整备份:周一

rm  -rf   /xtrabackup/*

date  09010000

innobackupex   --user=root    --password='Root123@'   /xtrabackup

ll   /xtrabackup/     2017-09-01 00-00-04

请问数据库中的增量是多少?      1 

增量备份:周二

date   09020000      更新时间

mysql    -uroot   -p'Root123@'   -e   'insert  into  testdb.test   value(2)'

innobackupex   --user=root   --password='Root123@'   --incremental  /xtrabackup                --incremental-basedir=/xtrabackup/2017-09-01 00-00-04

basedir基于周一的备份,会生成一个今天的

ls  /xtrabackup/

增量备份:周三

date   09030000      更新时间

mysql    -uroot   -p'Root123@'   -e   'insert  into  testdb.test   value(3)'

innobackupex   --user=root   --password='Root123@'   --incremental  /xtrabackup                --incremental-basedir=/xtrabackup/2017-09-02 00-00-04

basedir基于周2的备份,会生成一个今天的

ls  /xtrabackup/

周四。。周五。。周六

4.增量恢复流程

停止数据库

systemctl   stop   mysqld

清理环境

rm  -rf  /var/lib/mysql/*

周一

innobackupex  --apply-log  --redo-only  /xtrabackup/2017-09-01_00-00-04    回滚合并

周二

innobackupex  --apply-log  --redo-only  /xtrabackup/2017-09-01_00-00-04

--incremental-dir=/xtrabackup/2017-09-02 00-00-04

恢复

innobackupex   --copy-back   /xtrabackup/2017-09-01 00-00-06/ .

chown  -R  mysql.mysql  /var/lib/mysql

systemctl   start  mysqld

登录查询记录,请思考记录是第几天的,想恢复3,怎么办?

systemctl stop mysqld

innobackupex  --apply-log  --redo-only  /xtrabackup/2017-09-01_00-00-04   --incremental-dir=/xtrabackup/2017-09-03_00-00-27

rm -rf /var/lib/mysql*

innobackupex -copy-back /xtrabackup/2017-09-01_00-00-04

chown -R   mysq.mysql   /var/lib/mysql
systemctl start mysqld
mysql -uroot -p'Root123@'   -e 'select * from testdb.test'

请思考,如何一次性把数据,周一,周二,周三恢复出来?

5.差异备份流程

rm  -rf   /xtrabackup/*

1.完整备份

周一 

date  10010000

create  database testdb;

use  testdb;

create  table  test(id  int);

insert   into   test2   values(1);

select  *  from  test2;

innobackupex   --user=root   --password='Root123@'    /xtrabackup

ls  /xtrabackup   看是否备份成功

2.差异备份

周二

date   10020000

mysql    -uroot   -p'Root123@'   -e   'insert  into  testdb.test2   value(2)'

innobackupex   --user=root   --password='Root123@'   --incremental  /xtrabackup                --incremental-basedir=/xtrabackup/2017-10-01 00-01-12

周三

date   10030000

mysql    -uroot   -p'Root123@'   -e   'insert  into  testdb.test2   value(3)'

innobackupex   --user=root   --password='Root123@'   --incremental  /xtrabackup                --incremental-basedir=/xtrabackup/2017-10-01 00-01-12

周四

date   10040000

mysql    -uroot   -p'Root123@'   -e   'insert  into  testdb.test2   value(4)'

innobackupex   --user=root   --password='Root123@'   --incremental  /xtrabackup                --incremental-basedir=/xtrabackup/2017-10-01 00-01-12

6.差异恢复流程

停止数据库

systemctl   stop   mysqld

清理环境

rm  -rf  /var/lib/mysql/*

重演回滚redo  log(周一,某此差异)------->恢复数据

innobackupex  --apply-log  --redo-only  /xtrabackup/2017-10-01_00-01-12

 

innobackupex  --apply-log  --redo-only  /xtrabackup/2017-10-01_00-01-12

--incremental-dir=/xtrabackup/2017-10-04_00-00-29

innobackupex   --copy-back   /xtrabackup/2017-10-01_00-01-12

chown  -R  mysql.mysql  /var/lib/mysql     修改权限

systemctl   start  mysqld     启动mysqld

通过binlog增量恢复(略)

三、实战案例2

mysqldump+binlog

1.优势

1.自动记录日子position位置

2.可用性,一致性

2.语法

mysqldump  -h  服务器  -u用户名  -p密码  数据库名  >  备份文件.sql    -h不写是对本机

-single-transaction      innodb 一致性,服务可用性,不关机的备份

--master-data=1|2       该选项将会记录binlog的日志位置与文件名并追加到文件中

master-data=2            注释掉日志记录

帮助

mysqldump   --help

3.备份实战

3.1准备两套root密码

密码1:Root123@                配置到当前数据库中

密码2:Root1234@              备用

3.2准备库1

create  database testdb1;

use  testdb;

create  table  t1(id  int);

insert   into   t1   values(1),(2),(3);

select  *  from  t1;

3.3执行备份

mysqldump  -p'Root123@'   --all-databases  --single-transaction   --master-data=2                --flush-logs  >  /backup/`date +%F-%H` -mysql-all.sql

3.4观察备份细节

vim  /backup/2016-11-25-14-mysql-all.sql

LOCAK TABLES  `user`  WRITE  mysqldump的锁机制,来保证数据一致性

22行 CHANGE MASTER TO MASTER LOG FILE=ocalhost-bin.000004MASTER LOG POS=154:

3.5备份后的,数据变更行为

开源数据库MYSQL DBA运维实战 第三章 备份,数据库

4.恢复实战

4.1备份二进制日志文件

cp  /var/lib/mysql/*bin* ~

4.2停止数据库

systemctl   stop  mysqld

4.3清理环境

rm  -rf  /var/lib/mysql/*

4.4启动数据库

systemctl   start  mysqld

grep  'password'   /var/log/mysqld.log  找密码,再改一下密码,使用密码2

mysqladmin   -uroot   -p'd-tlbwIgP3e2'         password "Root1234@"  password后面有空格

4.5mysql恢复数据

mysql  -p'Root1234@'  <   /backup/2016-11-25-14-mysql-all.sql

mysql  -p'Root1234@'   -e 'flush privileges'          一重启之后变成了密码1

登录并验证数据恢复结果,请思考恢复的数据库有几个?  1个  

4.6二进制日志恢复

观察二进制截取记录

vim   /backup/2016-11-25-14-mysql-all.sql

第22行  CHANGE MASTER TO MASTER LOG FILE=ocalhost-bin.000004MASTER LOG POS=154:

mysqlbinlog localhost-bin.000002 localhost-bin000003-start-position=154mysql-p'Root123@'

注意后续有多少日志,就要跟多少日志名字

4.7观察数据

恢复完整

4.8请思考误删除的问题.

如何保留误删的testdb3库

[root@localhost -]#mysglbinlog localhost-bin.00004.....005.....006...... > 1.txt
删除1.txt中不需要的at(比如test3库是误操作)
cat 1.txt  I  mysgl  -p'Root123@'

4.9关于数据恢复时的多余日志

开源数据库MYSQL DBA运维实战 第三章 备份,数据库

方法二:在备份文件中,加入关闭二进制日志

四、实战案例3---记录的导出和导入

1.记录导出

注意目录权限

vim  /etc/my.cnf

secure-file-priv=/backup         mysql不信任该目录(要重启mysql程序)

chown  mysql.mysql  /backup    mysql用户没有权限

SELECT...INTO OUTFILE 导出文本文件

mysql> SELECT  *  FROM  testdb1.t1  INTO  OUTFILE  '/backup/testdb1.t1.txt';

mysql命令导出文本文件

mysql-uroot -p'QianFeng@123' -e 'select * from testdb1.t1' > /backup/testdb1.t2.txt
mysql-u root -p'QianFeng@123' --xml-e 'select * from testdb1.t1' > /backup/testdb1.t3.txt

mysql-u root -p'QianFeng@123' --html -e 'select * from testdb1.t1' > /backup/index.html

2.LOAD DATA INFILE导入文本文件.

注意目录权限

vim  /etc/my.cnf

secure-file-priv=/backup         mysql不信任该目录(要重启mysql程序)

chown  mysql.mysql  /backup    mysql用户没有权限

删除表的内容,标的到处和导入只备份表记录,不会备份表结构,因此需要通过mysqldump备份表结构,恢复时先恢复表结构,再导入数据

delete  from  testdb1.t1

LOAD DATA  INFILE  '/backup/testdb1.t1.txt'  INTO  TABLE testdb1.t1;

select * from testdb1.t1;文章来源地址https://www.toymoban.com/news/detail-832324.html

到了这里,关于开源数据库MYSQL DBA运维实战 第三章 备份的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • 开源数据库Mysql_DBA运维实战 (备份与还原)

    备份对于数据库而言是至关重要的。当数据文件发生损坏、MySQL服务出现错误、系统内核崩溃、计算机硬件损坏或者数据被误删等事件时,使用一种有效的数据备份方案,就可以快速解决以上所有的问题。MySQL提供了多种备份方案,包括: 逻辑备份、物理备份、全备份以及增

    2024年02月12日
    浏览(49)
  • 开源数据库Mysql_DBA运维实战 (DCL/日志)

      SQL(Structured Query Language 即结构化查询语言) a.DDL语句   数据库定义语言: 数据库,表,视图,索引,存储过程,函数,创建删除ALTER(CREATE DROP ALTER)  b.DML语句 数据库操纵语言: 插入数据INSERT、删除数据DELETE、更新数据UPDATE c.DQL语句   数据库查询语言:查询数据SELECT d.

    2024年02月12日
    浏览(60)
  • 开源数据库Mysql_DBA运维实战 (部署服务篇)

             1.数据库能做什么 2.数据库的由来 数据库的系统结构❀ 1.数据库系统DBS 2.SQL语言(结构化查询语言) 3.数据访问技术 部署Mysql❀ 1.通过rpm安装部署Mysql 2.通过源码包安装部署Mysql 1.数据库能做什么 a.不论是淘宝,吃鸡,爱奇艺,抖音,快手,知乎,百度贴吧等,众所周

    2024年02月14日
    浏览(33)
  • 开源数据库Mysql_DBA运维实战 (修改root密码)

    本文以windows为例为大家详细介绍下MySQL修改root密码的4种方法,大家可以可以根据的自己的情况自由选择,希望对大家有所帮助 方法1: 用SET PASSWORD命令 首先登录MySQL。 格式:mysql set password for 用户名@localhost = password(‘新密码’); 例子:mysql set password for root@localhost = password

    2024年02月12日
    浏览(32)
  • 开源数据库Mysql_DBA运维实战 (DML/DQL语句)

    DML/DQL DML         INSERT    实现数据的  插入                 实例:         DELETE   实现数据的  删除                 实例:         UPDATE   实现数据的  更新                  实例1:                  实例2:          

    2024年02月13日
    浏览(32)
  • 高级DBA带你处理Mysql数据库10亿大数据条件下迁移实战

    在实际工作中,有些特殊的场景需要进行生产数据迁移,并且生产环境的数据量非常大,比如上10亿数据,并且迁移实施的时间并有所限制,比如9小时内、48小时内,必须恢复生产。 并且在这么庞大的数据量条件下,还要进行数据过滤调整! 此种情况下,传统Java jdbc多线程的

    2024年04月26日
    浏览(35)
  • MySQL运维实战(3.2) 常见数据库连接失败问题排查

    作者:俊达 我们经常会遇到一些数据库连接失败或访问报错的问题。收集并分析具体的报错信息,可以帮助我们迅速定位问题。 1、客户端到服务端的网络是否畅通,服务端端口是否能连通。 使用ping、telnet等工具探测服务端的端口是否能访问。 如果端口不通,要先排除网络

    2024年01月21日
    浏览(49)
  • 数据库SQL语言实战(五)(数据库系统概念第三章练习题)

    目录 前言知识 一、 关系模式 二、 属性域 例子 介绍 作用 三、Select常数 举例 解释  四、集合差运算 本质 举例  结论 练习题 3.17 3.18  3.21  总结  注:本文的SQL语言适用的是 Oracle数据库 与mySQL可能存在略微不同 模式的定义 :模式则是指数据库中 所有关系模式 的集合,它

    2024年04月22日
    浏览(51)
  • mysql-DBA(1)-数据库备份恢复-导入导出-日志解释

    log: hdd data :ssd  ,备份和导出都慢,缓冲池有污染。 逻辑备份:把所有的命令转换成sql语句。 修改配置文件: -A 备份所有 -B 备份哪个数据库 --master-data=1 同步 内容: 备份参数: 1.备份成文件,里面就是sql语句 2.routine: 3.trigger 触发器 4.event: 定时任务 5.-B 数据库 1.有-B 表

    2024年03月09日
    浏览(46)
  • 全网唯一解决Mysql数据库宕机生产事故的通用方法高级DBA真实案例解答

    国内90%的生产数据库用的最多的就是MySql数据库。企业软件生产环境通常情况下,都有一主一从,或者一主多从的HA高可用架构。结合作者本人实际经验结合一个实际的生产数据库宕机的例子,来讲解应该用怎么样的思路去解决问题。在生产事故过程中,有那些注意的关键点

    2024年02月05日
    浏览(47)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包